jtydhr88/ComfyUI-HY-Motion1
A ComfyUI plugin based on HY-Motion 1.0 for text-to-3D human motion generation.
何を解決するか
このプロジェクトは、テキスト記述から3D人間の動きを生成できるComfyUIプラグインを提供します。3Dアニメーションの作成プロセスを簡素化し、動きの生成、プロンプト最適化、業界標準フォーマット(GLBおよびFBX)へのエクスポートを自動化します。
動作方法
このプラグインは、テキストから動きへの変換にHY-Motion 1.0モデルを統合しています。テキストエンコーダ(Qwen3-8B LLMに基づく)と動き拡散ネットワークからなるパイプラインを使用します。結果を向上させるために、「プロンプト再書式化」機能を備えており、LLMを使用してユーザー入力を最適化し、必要な動きの持続時間を推定します。生成された動きは、プレビュー(2Dスケルトンまたはインタラクティブ3Dビューア)およびエクスポート用のさまざまなノードを経由して処理されます。
対象ユーザー
ComfyUIを使用し、手動キーフレーム作成なしで人間の動きシーケンスを生成したい3Dアニメーター、ゲーム開発者、AI研究者。
主な特徴
- テキストから動き: テキストプロンプトから直接3D人間アニメーションを生成。
- LLM駆動のプロンプト: 自動的にプロンプトを再書式化し、品質向上のための動きの持続時間推定。
- 柔軟なエクスポート: フロントエンド経由でGLBをサポート、カスタムMixamoキャラクターのリターゲティングによりFBXをサポート。
- メモリ最適化: GGUF、AWQ、BitsAndBytes量子化をサポートし、低VRAMGPUでも動作可能。LLMをCPUにオフロードするオプションあり。
- インタラクティブプレビュー: 再生コントロールとスケルトン/メッシュ切り替え機能を備えたThree.jsベースの3Dビューアを内蔵。
関連
- プロジェクト
- プロジェクト
- プロジェクト
- プロジェクト
- プロジェクト