PozzettiAndrea/ComfyUI-MotionCapture

ComfyUI wrapper for Motion capture from video

何を解決するか

標準的な動画ファイルからComfyUIエコシステム内で3D人体の動きと骨格データを抽出できるようにします。これにより、ユーザーは3Dアニメーションやデジタルキャラクターにリアルな人体の動きをキャプチャできます。

動作方法

このプロジェクトは、GVHMR(World-Grounded Human Motion Recovery)フレームワークに基づいたComfyUI用のカスタムノードのセットを実装しています。最新のポーズ推定ツール(ViTPoseおよびHMR2)を活用し、動画入力からSMPLおよびSMPL-Xボディモデルのパラメータを抽出します。

対象ユーザー

ComfyUIを使用し、現実世界の動画映像を3D骨格モーションデータに変換する必要があるデジタルアーティスト、アニメーター、AI動画クリエイター。

特徴

  • 動画からの3D人体モーションキャプチャ。
  • ワールドベースのモーション回復に使用されるGVHMRフレームワークに基づく。
  • SMPLおよびSMPL-Xボディモデルパラメータをサポート。
  • ComfyUI用のカスタムノードパッケージとして統合。

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト