N.E.K.O: 지속적인 메모리와 멀티 아바타를 지원하는 능동적인 AI 컴패니언 플랫폼
N.E.K.O: 지속적인 메모리와 멀티 아바타를 지원하는 능동적인 AI 컴패니언 플랫폼
해결하는 문제
N.E.K.O.는 단순한 작업 중심의 AI 에이전트나 정적인 역할극 채팅 인터페이스를 넘어설 수 있도록 설계되었습니다. 이는 사용자의 환경에 대한 실시간 인지 능력, 지속적인 메모리, 그리고 디지털 작업 공간 내에서 능동적으로 상호작용을 시작하고 사용자를 도울 수 있는 능력을 갖춘 "디지털 생명체"를 만드는 것을 목표로 합니다.
작동 방식
이 프로젝트는 여러 고급 AI 기능을 단일 플랫폼에 통합합니다:
- Perception: 음성을 위한 Realtime APIs와 텍스트를 위한 ChatCompletion을 사용하며, 시각적 이해를 결합하여 사용자의 화면을 "볼" 수 있습니다.
- Memory: 컴패니언이 시간이 지남에 따라 진화하고 사용자를 기억할 수 있도록 5차원 메모리 시스템(working, recent, factual, reflective, persona memory)을 채택합니다.
- Interaction: 모션 캡처 및 전체 화면 트래킹을 지원하는 다양한 아바타 형식(Live2D, VRM, MMD, PNGTuber)을 지원합니다.
- Agentic Capabilities: CUA 및 OpenClaw A2A와 같은 도구를 통해 브라우저와 컴퓨터를 조작하여 실제 작업을 수행할 수 있습니다.
- Extensibility: 게임 컴패니언십, 소셜 미디어 상호작용, 스마트 홈 통합과 같은 시나리오를 위한 SDK 및 플러그인 스토어를 제공합니다.
대상 사용자
- 도구가 아닌 정서적 지능을 갖춘 능동적인 AI 컴패니언을 찾는 사용자.
- Steam Workshop을 통해 커스텀 AI 캐릭터를 구축하고 공유하고 싶은 크리에이터(아티스트, 3D 모델러, 성우).
- 엔드투엔드 통합 AI 컴패니언 프레임워크에 관심이 있는 개발자.
주요 특징
- Proactive Engagement: AI는 화면 콘텐츠, 트렌드 주제 또는 개인적 역학 관계를 기반으로 대화를 시작할 수 있습니다.
- Cross-Platform Memory: 데스크톱, 모바일 및 게임 전반에 걸쳐 성격과 메모리를 동기화합니다.
- Open-Source Core: 핵심 드라이버는 Apache 2.0 라이선스 하에 제공되며 데이터 프라이버시를 보장하기 위해 로컬에서 실행됩니다.
- Multi-Model Support: OpenAI, Gemini, Qwen, DeepSeek를 포함한 14개 이상의 AI 제공업체와 호환됩니다.
Sources
- undefinedProject-N-E-K-O/N.E.K.O