jtydhr88/ComfyUI-HY-Motion1
A ComfyUI plugin based on HY-Motion 1.0 for text-to-3D human motion generation.
解决的问题
该项目提供一个 ComfyUI 插件,可实现从文本描述生成 3D 人类动作。它通过自动化动作生成、提示优化以及导出到 GLB 和 FBX 等行业标准格式,简化了 3D 动画的制作流程。
工作原理
该插件集成了 HY-Motion 1.0 模型用于文本到动作生成。其采用由文本编码器(基于 Qwen3-8B LLM)和动作扩散网络组成的流水线。为提升效果,内置「提示重写」功能,利用 LLM 优化用户输入并估算所需动作时长。生成的动作随后通过多个节点进行预览(2D 骨骼或交互式 3D 查看器)和导出。
适用人群
使用 ComfyUI 并希望无需手动关键帧即可生成人类动作序列的 3D 动画师、游戏开发者和 AI 研究人员。
主要亮点
- 文本生成动作:直接从文本提示生成 3D 人类动画。
- LLM 驱动的提示优化:自动重写提示并估算动作时长,以提升生成质量。
- 灵活导出:支持通过前端导出 GLB,以及通过自定义 Mixamo 角色重定向导出 FBX。
- 内存优化:支持 GGUF、AWQ 和 BitsAndBytes 量化,可在低 VRAM 显卡上运行,并可选择将 LLM 卸载到 CPU。
- 交互式预览:内置基于 Three.js 的 3D 查看器,支持播放控制和骨骼/网格切换。
相关
- 项目
- 项目
- 项目
- 项目
- 项目