sola1039/HAST-SEC

武汉光影流明科技有限公司 | 本地中文交互与连续角色运动 | 非商业早期研究版 | 寻求技术合作与融资

解决的问题

创建逼真且可控的虚拟角色非常困难。大多数系统需要昂贵的硬件或复杂的训练。本项目提供了一个本地、非商业的研究演示,让你能够用中文与3D角色对话,并发出简单的动作指令(如抬起手臂或抬腿),所有过程都在你自己的电脑上运行,无需外部API。

工作原理

该系统结合了一个小型文本模型(约0.8B参数)和一个轻量级动作模型。你在聊天框中输入消息或动作指令。文本模型理解你的意图,然后动作模型生成连续的角色动作,并在基于Web的查看器中播放。查看器还会显示过去15秒的实时图表,包括姿态指标和资源使用情况。本地服务处理所有推理,安装后无需连接互联网。

适用人群

本项目旨在为希望尝试语言驱动角色动画的研究人员、学生和爱好者提供参考。这明确是一个非商业的学习和研究版本,而非成品。用户可以修改代码、进一步训练模型,并根据自己的需求调整系统。这也是公司更广泛研究方向的一次演示。

特点

  • 与虚拟角色的中文聊天互动。
  • 语义动作控制:你可以说出简单的指令,如“挥动左手”或“抬起右腿”。
  • 在CPU或NVIDIA GPU上本地运行;无需外部API密钥。
  • 导入你自己的合法获取的VRM角色(完整骨骼,100MB以下)。
  • 实时显示15秒动作曲线、姿态指标和资源使用情况。
  • 在非商业许可下开源,用于学习和教学。

相关

  • 项目
  • 项目
  • 项目
  • 项目