N.E.K.O: 持続的なメモリとマルチアバターをサポートするプロアクティブなAIコンパニオンプラットフォーム

解決する課題

N.E.K.O.は、単なるタスク指向のAIエージェントや静的なロールプレイチャットインターフェースを超越することを目指して設計されています。ユーザーの環境に対するリアルタイムの認識、持続的なメモリ、そしてデジタルワークスペース内でプロアクティブにインタラクションを開始しユーザーを支援する能力を備えた「デジタルライフ」の構築を目指しています。

仕組み

このプロジェクトは、いくつかの高度なAI機能を単一のプラットフォームに統合しています：

• Perception: 音声にはRealtime APIsを、テキストにはChatCompletionを使用し、視覚的理解を組み合わせることでユーザーの画面を「見る」ことができます。
• Memory: 5次元メモリシステム（working, recent, factual, reflective, and persona memory）を採用し、コンパニオンが時間の経過とともに進化し、ユーザーを記憶し続けることを保証します。
• Interaction: モーションキャプチャとフルスクリーン・トラッキングを備えた複数のアバター形式（Live2D, VRM, MMD, PNGTuber）をサポートしています。
• Agentic Capabilities: CUAやOpenClaw A2Aなどのツールを介してブラウザやコンピュータを操作し、実際のタスクを実行できます。
• Extensibility: ゲーミングコンパニオンシップ、ソーシャルメディア・インタラクション、スマートホーム統合などのシナリオに向けたSDKとプラグインストアを特徴としています。

対象ユーザー

• 単なるツールではなく、感情的に知的なプロアクティブなAIコンパニオンを求めるユーザー。
• Steam Workshopを通じてカスタムAIキャラクターを構築・共有したいクリエイター（アーティスト、3Dモデラー、声優）。
• エンドツーエンドで統合されたAIコンパニオン・フレームワークに興味がある開発者。

ハイライト

• Proactive Engagement: AIは画面の内容、トレンドのトピック、または個人のダイナミクスに基づいて会話を開始できます。
• Cross-Platform Memory: デスクトップ、モバイル、およびゲーム間でパーソナリティとメモリを同期します。
• Open-Source Core: コアドライバーはApache 2.0の下でライセンスされており、データプライバシーを確保するためにローカルで動作します。
• Multi-Model Support: OpenAI, Gemini, Qwen, DeepSeekを含む14以上のAIプロバイダーと互換性があります。