AlphaAvatar/AlphaAvatar
A real-time interactive Omni Avatar built on LiveKit, which allows you to seamlessly integrate with any open source Avatar components (real-time model, visual, voice, memory, search, etc.).
解決的問題
AlphaAvatar 提供一個用於建立可自我主機、以隱私為首要考量的個人AI助理的框架。它讓助理能扮演「智慧管家」的角色。此框架超越了簡單的聊天機器人,使代理具備狀態保持、主動性與多模態能力,能記住使用者偏好、規劃長期任務,並透過語音、文字、影片等多種管道進行互動。
工作原理
該系統採用基於外掛的即時代理架構,透過核心感知層處理多模態觀測資料(語音、攝影機、螢幕)。它整合了多個關鍵模組:
- 記憶與人格:使用圖感知的多模態記憶與自動人格萃取,以維持身分連續性與使用者理解。
- 互動路由:管理即時語音路由、發言順序與中斷。
- 工具整合:透過 MCP(模型上下文協定)、RAG 用於文件檢索,以及 DeepResearch 用於網路搜尋,連接外部世界。
- 虛擬角色:提供助理的視覺化呈現,以進行即時互動。
- 基礎設施:連接至各種 LLM 提供者與儲存後端(如 LanceDB 或 Qdrant),用於向量與身分資料。
適用對象
專為希望擁有高度個人化、可自我主機的AI夥伴的開發者與使用者設計,能管理個人生活指標、組織知識、排程任務,並執行自主的多步驟工作流程。
主要亮點
- 隱私優先:完全可自我主機,讓使用者完全掌控自己的資料與記憶。
- 多模態互動:支援即時語音、文字與攝影機輸入,並配有專用的虛擬角色介面。
- 主動規劃:包含任務分解、提醒與長期目標執行的模組。
- 可擴展工具:整合 MCP 以連接外部 API,並透過 RAG 整合個人知識庫。
- 多樣化存取管道:可透過 Web 示範、LiveKit 遊樂場,以及 WhatsApp 等即時通訊平台使用。
相關
- 專案
KevinLiss/ApeAdminApeAdmin 是一個針對 AI 應用設計的開源 FastAPI + Vue 3 管理框架。它提供 WordPress 風格的安裝精靈、完整的 RBAC、模組化架構,以及將後端功能轉換為 LLM 代理可呼叫工具的 MCP‑SSE 網關。內建多模型聊天、稽核日誌與模組市場,讓您能快速建構安全的管理介面,並在不額外撰寫 API 的情況下,將業務邏輯暴露給 AI 代理。
- 專案
RTGS2017/NagaAgentNagaAgent 是一個跨平台桌面 AI 助手(Windows/macOS/Linux),支援與任何 OpenAI 相容 LLM 聊天,透過 JSON 塊自訂工具呼叫,使用 Neo4j 儲存圖-RAG 記憶,整合 Live2D 動畫頭像,支援語音合成/識別與唇形同步,提供天氣、網頁搜尋、遊戲指南等插件的 MCP 框架,以及論壇、技能市場等社群功能。以 Electron/Vue 前端 + Python FastAPI 後端建構,可透過 `uv sync`(或 pip)安裝,採用 AGPL-3.0 + 專有商業授權的雙重授權。
- 專案
dromara/wgaiWGAI 是一個基於 Spring-Boot + Vue 的 Web 平台,將視覺(OpenCV、YOLO、OCR、人臉辨識)、音訊(語音轉文字、ChatGPT 風格對話)、數位人虛擬形象與 AGV 導航整合為一個離線優先、工業級的 AI 管理系統。提供線上資料標註、模型訓練、即時影片/音訊分析與系統監控功能,並配備設定介面與公開示範實例。程式碼採用 AGPL-3.0 授權,支援主要透過付費中文社群提供。
- Dispatch
ChatGPT 插件發布OpenAI 已為 ChatGPT 推出插件,使模型能夠存取即時資訊、執行計算,並整合第三方服務,以擴展其功能並降低幻覺現象。
- 專案
lc2panda/alphastreamAlphastream 是一個 AI 驅動的金融分析 Web 應用。它使用 DeepSeek/任何 OpenAI 相容 LLM 與 LangGraph,運行 14 個專業智能體(技術、基本面、情感、風險等)以及 4 個投資者人格智能體。即時市場資料來自雙適配器(AKShare 與 BaoStock),涵蓋中國、美國、香港、加密貨幣與宏觀資料來源。Next.js + React 前端採用暗色玻璃擬態 UI,包含聊天、儀表板與圖表卡片;Flask 後端透過 SSE 流式傳輸智能體進度。所有服務可透過單一 Docker-Compose 命令啟動。