ButzYung/SystemAnimatorOnline

何を解決するか

XR Animator は、1台のウェブカメラのみを使用して、3Dアバター（MMDやVRMモデルなど）をリアルタイムで制御できるAIモーションキャプチャアプリです。高価なモーションキャプチャハードウェアの必要性を排除し、VTuber、メタバース、その他の3Dコンテンツ制作において、フルボディトラッキングを手軽に利用可能にします。

動作方法

このアプリケーションは、MediaPipe と TensorFlow.js の機械学習モデルを活用して、ライブウェブカメラ映像から3Dポーズを検出します。検出された動きはリアルタイムで3Dアバターにマッピングされます。顔、フルボディ、または両方の組み合わせに加え、手の動きもサポートしています。

対象ユーザー

VTuber、3Dアーティスト、XR/AR開発者が、モーションキャプチャとアバターアニメーションへの入り口を低コストで提供したい場合に最適です。

主な特徴

• マルチプラットフォーム対応：主要ブラウザおよびスマートフォンに対応するWebアプリと、Windows、Linux、macOS用のネイティブデスクトップアプリの両方で利用可能。
• 包括的なトラッキング：フルボディAIモーショントラッキングと、「Perfect Sync」/ARKit互換の顔トラッキング（52種類のブレンドシェイプ対応）をサポート。
• アバター互換性：MMDおよびVRMモデルに対応。
• モーションのエクスポート/インポート：モーションキャプチャデータを記録し、VMD、BVH、glTF形式にエクスポート可能。
• ARモード：ARCoreとWebXRを活用したAndroid Chromeブラウザでの拡張現実（AR）サポート。
• 外部統合：VMCプロトコルをサポートし、VSeeFaceやWarudo（Electron版のみ）などのVMC対応アプリへアニメーションデータを送信可能。