kuafuai/andee

解決する問題

Andee は、従来のクラウドベースのアシスタントではなく、デバイス上で永続的かつ自律的に動作する「居住者」として設計された Android ベースのエージェントです。ローカルで実行し、独自のプライベートメモリを維持し、特定の統合や SDK を必要とせずにスマートフォン上のあらゆるアプリと対話することで、断片化されベンダーにロックインされた AI アシスタントの問題を解決します。

仕組み

Andee は単一の Android APK として機能し、システムの AccessibilityService を使用して画面を「見て」アクションを実行し、WindowManager を使用してフローティングインターフェースを表示します。リクエストを処理するために、任意の OpenAI 互換 LLM エンドポイント（ローカルまたはリモート）に接続して動作します。グリッドベースのシステムを使用して UI 要素と対話し、フィールドに直接テキストを入力し、ユーザーの習慣や約束のローカル「ノートブック」を管理します。また、USB OTG を介してロボット犬などのハードウェアとインターフェースし、物理的な動きを可能にすることもできます。

対象ユーザー

このプロジェクトは、デバイス上に存在し、一貫したペルソナを維持し、インストールされているあらゆるアプリケーションにわたって複雑なマルチステップタスクを実行できる、高度に自律的でプライバシー重視の AI エージェントを求めるパワーユーザーと開発者向けです。

ハイライト

• ローカルファーストのプライバシー： ノートブック、習慣、メモリをデバイス上に保持し、ベンダーのクラウドプロファイルはありません。
• ユニバーサルアプリ対話： アクセシビリティサービスを使用してあらゆるアプリと対話し、特別な統合や API は不要です。
• 自律動作： 会話のレビューやタスク管理など、監視されていないときに独立して動作できます。
• 動的ペルソナ： カスタマイズ可能な顔とムードを備えたフローティングインターフェースを備え、モデルの出力に基づいてリアルタイムで変化します。
• ハードウェア統合： ロボット犬などの物理ハードウェアをサポートし、デバイスの身体の延長として扱います。