N.E.K.O: 一个具有持久记忆和多虚拟形象支持的主动式 AI 伴侣平台

N.E.K.O: 一个具有持久记忆和多虚拟形象支持的主动式 AI 伴侣平台

它解决了什么问题

N.E.K.O. 旨在超越简单的任务导向型 AI 智能体或静态角色扮演聊天界面。它的目标是创造一种“数字生命”——一个能够实时感知用户环境、拥有持久记忆,并能够在用户的数字工作空间内主动发起交互并协助用户的 AI 伴侣。

它是如何工作的

该项目将几种先进的 AI 能力集成到一个单一平台中:

  • 感知:使用 Realtime APIs 进行语音交互,使用 ChatCompletion 进行文本交互,并结合视觉理解能力来“看到”用户的屏幕。
  • 记忆:采用五维记忆系统(工作记忆、近期记忆、事实记忆、反思记忆和人格记忆)以确保伴侣能够随着时间的推移不断进化并记住用户。
  • 交互:支持多种虚拟形象格式(Live2D, VRM, MMD, PNGTuber)并具备动作捕捉和全屏追踪功能。
  • 智能体能力:可以通过 CUA 和 OpenClaw A2A 等工具操作浏览器和计算机以执行实际任务。
  • 可扩展性:提供 SDK 和插件商店,适用于游戏陪伴、社交媒体互动和智能家居集成等场景。

目标用户

  • 寻求具有情感智能的主动式 AI 伴侣,而非仅仅是工具的用户。
  • 希望通过 Steam Workshop 构建并分享自定义 AI 角色的创作者(艺术家、3D 建模师、配音演员)。
  • 对端到端集成 AI 伴侣框架感兴趣的开发者。

亮点

  • 主动参与:AI 可以根据屏幕内容、趋势话题或个人动态发起对话。
  • 跨平台记忆:在桌面端、移动端和游戏中同步人格和记忆。
  • 开源核心:核心驱动程序采用 Apache 2.0 许可,并在本地运行以确保数据隐私。
  • 多模型支持:兼容 14 个以上的 AI 提供商,包括 OpenAI, Gemini, Qwen, 和 DeepSeek。

Sources