ButzYung/SystemAnimatorOnline

解决的问题

XR Animator 是一个实时 AI 动作捕捉应用程序，仅需单个网络摄像头即可驱动 3D 角色（如 MMD 或 VRM 模型）。它消除了对昂贵动作捕捉硬件的需求，使全身体感追踪对 VTuber、元宇宙及其他 3D 内容创作变得触手可及。

工作原理

该应用程序利用 MediaPipe 和 TensorFlow.js 的机器学习模型，从实时网络摄像头画面中检测 3D 姿态。检测到的动作会实时映射到 3D 角色上。支持多种追踪配置，包括面部、全身，或两者的组合以及手部追踪。

适用人群

专为希望以低门槛进入动作捕捉和角色动画的 VTuber、3D 艺术家以及 XR/AR 开发者设计。

主要亮点

• 多平台支持：提供兼容主流浏览器和智能手机的网页应用，以及 Windows、Linux、macOS 的原生桌面应用。
• 全面追踪：支持全身体感 AI 动作追踪，以及「Perfect Sync」/ARKit 兼容的面部追踪（支持 52 个混合形状）。
• 角色兼容性：支持 MMD 和 VRM 模型。
• 动作数据导出/导入：可录制动作捕捉数据，并导出为 VMD、BVH 或 glTF 格式。
• AR 模式：通过 ARCore 和 WebXR 支持 Android Chrome 浏览器的增强现实（AR）功能。
• 外部集成：支持 VMC 协议，可将动画数据发送至其他 VMC 兼容应用，如 VSeeFace 或 Warudo（仅 Electron 版本）。