iFurySt/open-codex-computer-use
👾 Open Computer Use – Open-Source Alternative to Codex Computer Use
解決する課題
open-computer-useは、AIエージェントがmacOS、Linux、Windowsにわたってコンピュータのユーザーインターフェース(UI)と対話するためのオープンソースの方法を提供します。エージェントは、アプリのリスト表示、アプリの状態取得、キー入力などのアクションを実行でき、プラットフォームに関係なくOSを操作することが可能になります。
仕組み
このプロジェクトは、Model Context Protocol (MCP) サービスとして実装されています。つまり、あらゆるMCP互換のAIエージェントまたはクライアント(Codex、Claude Code、Gemini CLIなど)がこれに接続し、そのツールを使用してコンピュータを制御できます。macOSでは、アクセシビリティと画面収録の権限を活用して、システムに干渉することなく操作を行います。
対象ユーザー
デスクトップ環境を操作する必要があるAIエージェントを構築している開発者、およびAIアシスタントにコンピュータ制御機能を追加したいMCP互換クライアントのユーザー。
ハイライト
- クロスプラットフォーム対応: macOS、Linux、Windowsで動作します。
- MCPネイティブ: 様々なAIエージェントとの統合を容易にするため、MCPサービスとしてラップされています。
- 拡張可能なインストール: Codex、Claude Code、Gemini CLIなどの人気のあるエージェントに素早くインストールするための組み込みコマンドが含まれています。
- カーソル移動システム: macOS専用のオープンソースのカーソル移動システムが含まれています。