PozzettiAndrea/ComfyUI-MotionCapture
ComfyUI wrapper for Motion capture from video
何を解決するか
標準的な動画ファイルからComfyUIエコシステム内で3D人体の動きと骨格データを抽出できるようにします。これにより、ユーザーは3Dアニメーションやデジタルキャラクターにリアルな人体の動きをキャプチャできます。
動作方法
このプロジェクトは、GVHMR(World-Grounded Human Motion Recovery)フレームワークに基づいたComfyUI用のカスタムノードのセットを実装しています。最新のポーズ推定ツール(ViTPoseおよびHMR2)を活用し、動画入力からSMPLおよびSMPL-Xボディモデルのパラメータを抽出します。
対象ユーザー
ComfyUIを使用し、現実世界の動画映像を3D骨格モーションデータに変換する必要があるデジタルアーティスト、アニメーター、AI動画クリエイター。
特徴
- 動画からの3D人体モーションキャプチャ。
- ワールドベースのモーション回復に使用されるGVHMRフレームワークに基づく。
- SMPLおよびSMPL-Xボディモデルパラメータをサポート。
- ComfyUI用のカスタムノードパッケージとして統合。
関連
- プロジェクト
- プロジェクト
- プロジェクト
- プロジェクト