moeru-ai/airi

解决的问题

Project AIRI 致力于为 AI 虚拟角色（赛博女友或数字伴侣）创建一个「灵魂容器」，使其不仅能聊天，还能做更多事情。现有 AI 聊天平台侧重于角色扮演，而 AIRI 的重点是打造能够与现实世界互动、玩 Minecraft 和 Factorio 等游戏，并在 Discord、Telegram 等多个平台上与用户交流的数字人类。

工作原理

AIRI 将大语言模型（LLM）与一系列感知和运动能力相结合：

• 大脑：集成多种 LLM 提供商（OpenAI、Claude、DeepSeek 等），正在开发中，可通过浏览器内数据库（DuckDB WASM、pglite）实现游戏玩法和记忆保持。
• 耳朵：处理来自浏览器和 Discord 的音频输入，具备客户端语音识别和说话检测功能。
• 嘴巴：支持多种语音合成提供商，包括 ElevenLabs 和本地 Kokoro TTS。
• 身体：支持 VRM 和 Live2D 模型，并实现自动眨眼、注视和空闲动作动画。

该项目结合了 Web 技术（WebGPU、WebAssembly、WebAudio）以实现跨平台访问（浏览器、PWA、移动端），并为桌面版本提供原生加速（NVIDIA CUDA、Apple Metal）。

适用人群

• 希望拥有个性化、互动式数字伴侣或 AI VTuber 的用户。
• 对使用 Web 和 AI 技术构建 AI 驱动的虚拟角色感兴趣的开发者和艺术家。
• 希望实现能与游戏和外部通信应用互动的 AI 代理的创作者。

主要亮点

• 跨平台：可在现代浏览器、移动设备（PWA）和桌面端（Windows、macOS、Linux）运行。
• 游戏集成：支持运行 Minecraft 和 Factorio，Kerbal Space Program 和 Helldivers 2 等其他游戏正在开发中。
• 广泛 LLM 支持：通过 xsai 库兼容大量 API 提供商。
• 视觉保真度：完全支持 Live2D 和 VRM 模型，并具备自主动画功能。