sign/translate

解决的问题

该项目解决了手语使用者与口语使用者之间的沟通鸿沟，提供手语与口语/书面语之间的实时双向翻译。

工作原理

该系统通过两个主要流程运行：

1. 手语生成（口语转手语）： 将语音或文本转换为标准化文本，再转换为SignWriting，最后生成姿态序列。这些序列通过骨架查看器、3D角色或Human GAN进行渲染。
2. 手语翻译（手语转口语）： 通过上传或实时摄像头处理手语视频，经过分割和SignWriting转换，生成口语文本和音频。

适用人群

专为使用手语和使用口语的人群设计，可在桌面和移动平台上实现无缝沟通。

主要亮点

• 实时翻译功能。
• 双向支持（口语转手语和手语转口语）。
• 多种输出格式，包括3D角色和Human GAN。
• 支持实时摄像头流和上传的视频。