duixcom/Duix-Mobile

解決的問題

Duix Mobile 為開發者提供了一種在行動與嵌入式裝置上建立即時互動式 AI Avatars 的方法。它消除了對雲端伺服器進行虛擬形象視覺與互動行為的依賴，實現了更具人性化的低延遲、隱私保護且輕量化的互動。

工作原理

這是一個開源 SDK，可以部署在 iOS、Android 與其他嵌入式螢幕上。開發者可以將自有或第三方的語言大模型 (LLM)、自動語音辨識 (ASR) 與文字轉語音 (TTS) 服務整合至 SDK 中以驅動對話。系統支援唇形同步、具備插話 (barge-in) 能力的串流音訊，以及核心功能的本地執行，以確保在網路狀況不佳時的穩定性。

適用對象

建構智慧客服、虛擬醫生、虛擬律師、虛擬伴侶與虛擬導師應用程式的行動與嵌入式裝置開發者。

亮點

• 超低延遲：在 Snapdragon 8 Gen 2 SoC 上回應時間低於 120ms。
• 裝置端部署：本地運行以減少資源消耗並提高隱私性。
• 跨平台：支援 Android 與 iOS 一鍵部署。
• 類人互動：支援自然的臉部表情、情感暗示以及支援中斷的串流音訊。
• 模組化設計：允許快速定制特定行業的解決方案。