RachelForster/Shinsekai

解决的问题

Shinsekai 是为 Galgame、乙女游戏和剧情驱动型 RPG 设计的桌面助手。它通过将 LLM 驱动的对话、带有情感同步的角色立绘（精灵图）、文本转语音（TTS）和语音转文本（ASR）整合到一个统一的体验中，解决了工作流碎片化的问题。

如何工作

该系统将功能分为两个主要界面：基于 React 的设置中心，用于管理 API、角色和插件；以及用于实际表演的专用聊天窗口。它通过 API 连接到各种 LLM 提供商，支持多种 TTS 引擎（如 GPT-SoVITS 和 Genie TTS），并可通过 ComfyUI 集成图像生成。它使用插件 SDK 和 Model Context Protocol (MCP) 来扩展外部工具和服务的功能。

适用人群

面向视觉小说和剧情驱动游戏的创作者与玩家，希望创建具有同步视觉与音频的沉浸式 AI 驱动角色互动。

主要亮点

• 集成化表演流程：在一个工作流中整合聊天模板、会话历史、情感驱动的精灵图切换和语音合成。
• 可扩展架构：支持插件 SDK 和 MCP，可添加新的 LLM、TTS、ASR 和 T2I 适配器或外部工具。
• 情感联动：根据 AI 对话中的情感标签自动切换角色精灵图。
• 长期记忆：跨不同会话管理并检索角色专属记忆，以保持剧情一致性。
• 可自定义视觉：内置主题管理器，支持编辑聊天皮肤、字体和舞台风格。
• 角色库：提供超过 100 个预设角色包，可立即使用。