ButzYung/SystemAnimatorOnline

解決的問題

XR Animator 是一個即時 AI 動作捕捉應用程式，僅需單一網路攝影機即可驅動 3D 角色（例如 MMD 或 VRM 模型）。它消除了對昂貴動作捕捉硬體的需求，讓全身體感追蹤對 VTuber、元宇宙及其他 3D 內容創作變得觸手可及。

工作原理

此應用程式利用 MediaPipe 和 TensorFlow.js 的機器學習模型，從即時網路攝影機畫面中偵測 3D 姿勢。偵測到的動作會即時映射到 3D 角色上。支援多種追蹤設定，包括臉部、全身，或兩者的組合以及手部追蹤。

適用對象

專為希望以低門檻進入動作捕捉和角色動畫的 VTuber、3D 藝術家以及 XR/AR 開發者設計。

主要亮點

• 多平台支援：提供相容主流瀏覽器與智慧型手機的網頁應用，以及 Windows、Linux、macOS 的原生桌面應用。
• 全面追蹤：支援全身體感 AI 動作追蹤，以及「Perfect Sync」/ARKit 相容的臉部追蹤（支援 52 個混合形狀）。
• 角色相容性：支援 MMD 和 VRM 模型。
• 動作資料匯出/匯入：可錄製動作捕捉資料，並匯出為 VMD、BVH 或 glTF 格式。
• AR 模式：透過 ARCore 和 WebXR 支援 Android Chrome 瀏覽器的擴增實境（AR）功能。
• 外部整合：支援 VMC 協定，可將動畫資料傳送至其他 VMC 相容應用，如 VSeeFace 或 Warudo（僅 Electron 版本）。