Lynpoint/CyberVerse

解決的問題

CyberVerse 使創建能夠即時看、聽、說的互動式數位人成為可能。它解決了協調低延遲語音互動、人格驅動對話以及同步視訊虛擬形象的複雜性，允許使用者僅憑一張照片即可賦予其生命，使其成為活生生的數位智能體。

工作原理

該框架採用多智能體架構：前台的 PersonaAgent 負責流暢的即時對話與中斷處理，而後台的 SubAgents 則處理研究或摘要等長期任務。它利用 WebRTC 實現低延遲通訊，並支援基於插件的堆疊，其中大腦、語音與面部等組件是可替換的。它可以驅動本地模型（如 FlashHead 或 LiveAct）或使用基於雲端的數位人 API。

適用對象

尋求構建沉浸式 AI 智能體、娛樂用數位角色，或需要持久記憶與專業知識的互動式語音/視訊助手的開發者與創作者。

亮點

• 即時視訊互動： 支援與數位人進行全雙工、自然的視訊通話。
• 多智能體架構： 將對話流與沉重的計算任務分離。
• 角色記憶與 RAG： 使用本地儲存保存對話歷史，並使用 RAG 進行基於知識的人格對齊。
• 可擴展的插件系統： 透過 LiteLLM 等統一介面，實現 LLM、TTS、ASR 與視覺模組的可替換性。