TurixAI/TuriX-CUA

This is the official website for TuriX Computer-use-Agent

What it solves

TuriX 是一個電腦使用代理，允許使用者在各種應用程式間自動化桌面操作，無需應用程式專屬的 API。它讓使用者能「與電腦對話」，讓 AI 在 GUI 上直接執行複雜任務——例如預訂機票、搜尋資訊與建立文件，或在不同軟體之間搬移資料。

How it works

系統使用視覺語言模型（VLM）作為「大腦」來解讀螢幕並規劃動作。可透過 config.json 檔案設定不同模型（例如透過 Turix API、Ollama 或其他供應商）。代理可以透過「Skills」（Markdown 劇本）擴充，提供規劃器在執行特定任務時的指示。它也支援 Model Context Protocol（MCP），以整合如 Claude for Desktop 等其他代理。

Who it’s for

此工具設計給個人與研究使用者，目標是想在 macOS、Windows 與 Linux 上自動化重複性桌面工作流程的使用者。

Highlights

  • API-Independent Automation：在 GUI 上操作，意味著它能控制任何人類能點擊的應用程式。
  • High Performance：在 OSWorld 基準測試中達到 64.2% 成功率，且在 macOS 專屬基準測試中超過 80%。
  • Hot-Swappable Models：允許使用者輕鬆更換底層 VLM 策略，無需修改程式碼。
  • Extensible Skills：使用基於 Markdown 的劇本指導代理的規劃與執行。
  • Cross-Platform Support：支援 macOS、Windows 與 Linux。