OpenMOSS/MOSS-TTSD
A multilingual model for long-form, multi-speaker dialogue synthesis with flexible speaker control and zero-shot voice cloning
解决的问题
MOSS-TTSD 解决了传统文本转语音(TTS)系统仅专注于单说话人独白的局限性。它将静态对话脚本转化为长时间持续、富有表现力的多说话人对话,同时保持说话人身份和情感流动,这对于播客、有声书等专业内容至关重要。
工作原理
该模型采用延续性工作流,用户需提供每位说话人(最多5人)的参考音频和转录文本。随后,基于对话脚本生成音频,确保自然的发言顺序和重叠说话模式。对于高性能部署,可与 MOSS-Audio-Tokenizer 融合,并通过 SGLang 推理引擎运行,显著加速生成过程。
适用人群
专为制作长篇口语内容的创作者和开发者设计,例如 AI 播客、体育与电竞解说、配音、有声书制作等。
主要亮点
- 多说话人对话:支持 1 至 5 名说话人,灵活控制对话节奏并维持角色特征。
- 超长上下文:单次会话中可生成长达 60 分钟的连贯音频,同时保持一致的身份特征。
- 零样本语音克隆:仅需短时参考音频样本即可实现高保真语音克隆。
- 多语言支持:在包括中文、英文、日文及多种欧洲语言在内的 20 种语言中表现稳健。
- 高速推理:与 SGLang 集成,显著加速端到端推理速度。
相关
- 项目
- 项目
- 项目
- 项目
- 项目