RachelForster/Shinsekai

解決的問題

Shinsekai 是為 Galgame、乙女遊戲與劇情導向 RPG 所設計的桌面助理。它透過整合 LLM 驅動的對話、具情感同步的角色立繪（精灵圖）、文字轉語音（TTS）與語音轉文字（ASR）於單一、整合的體驗中，解決了工作流程碎片化問題。

如何運作

系統將功能分為兩個主要介面：基於 React 的設定中心，用於管理 API、角色與外掛；以及專用的聊天視窗，用於實際演出。它透過 API 連接至各類 LLM 提供商，支援多種 TTS 引擎（如 GPT-SoVITS 和 Genie TTS），並可透過 ComfyUI 集成圖像生成。它使用外掛 SDK 與 Model Context Protocol (MCP) 來擴展外部工具與服務的功能。

適用對象

針對視覺小說與劇情導向遊戲的創作者與玩家，希望創造具同步視覺與音訊的沉浸式 AI 驅動角色互動。

主要特色

• 整合式演出流程：於單一工作流程中整合聊天範本、會話歷史、情感驅動的精靈圖切換與語音合成。
• 可擴展架構：支援外掛 SDK 與 MCP，可新增 LLM、TTS、ASR、T2I 适配器或外部工具。
• 情感連結：根據 AI 對話中的情感標籤自動切換角色精靈圖。
• 長期記憶：跨不同會話管理並取得角色專屬記憶，以維持劇情一致性。
• 可自訂視覺：內建主題管理器，支援編輯聊天皮膚、字型與舞台風格。
• 角色資料庫：提供超過 100 個預設角色套件，可立即使用。