Johnson-Durui/Companion-Space

解決する課題

Companion Space は「コンパニオン学習」を目的としたローカルファーストアプリです。ユーザーは異なる教科用に専用の学習空間を作成し、自身の教材をインポートして、仮想キャラクターと対話することで、情報を整理・復習・暗記できます。

動作方法

システムはプライバシーを確保するため、主にユーザーのコンピュータ上で動作し、データと認証情報はすべてローカルに保存されます。インポートしたドキュメントに基づいて質問に答えるためのRetrieval-Augmented Generation (RAG)アプローチを採用しており、出典付きで回答を提供します。対話にはテキストとリアルタイム音声通信をサポートし、AIの発話に割り込むことも可能です。視覚的には、リップシンク、感情表現、視線、動きを備えた3D VRMキャラクター（および2Dバックアップ）を統合しています。AIバックエンドは、即時テスト用のモックサービスを含み、OllamaやOpenAI互換APIに対応しています。

対象ユーザー

学生、生涯学習者、アニメ風の仮想キャラクターが好きな方で、プライベートでインタラクティブかつ視覚的に魅力的な方法で学習資料を管理・復習したい人向けです。

特徴

• ローカルファーストのプライバシー: データと認証情報はユーザーのマシン上に留まります。
• RAG駆動の学習: 自分のドキュメントをインポートして、出典付きの根拠あるAI対話が可能になります。
• マルチモーダル対話: リアルタイム音声、テキスト、3D VRMキャラクターのアニメーションをサポートします。
• 柔軟なAIバックエンド: OllamaやOpenAI互換プロバイダーと互換性があります。
• カスタマイズ可能な空間: コース、プロジェクト、興味分野ごとに資料や会話を整理できます。