suitedaces/computer-agent

What it solves

Taskhomie는 컴퓨터 운영체제 전반의 작업을 자동화하기 위해 설계된 로컬 AI 에이전트입니다. 사용자가 자연어 명령을 통해 일반적으로 데스크톱 환경에서 수동 작업이이 필요했던 동작들을 수행할 수 있게 해줍니다.

How it works

이 에이전트는 두 가지 별도의 모드로 작동합니다:

• Computer Use Mode: 에이전트는 화면의 스크린샷을 찍고 마우스 커서와 키보드를 직접 제어하여 모든 애플리케이션과 상호작용합니다.
• Background Mode: 이 모드는 웹 자동화를 위해 Chrome DevTools Protocol을 사용하고 기타 작업은 터미널을 사용하여, 에이전트가 비동기적으로 작동하는 동안 사용자가 컴퓨터를 계속 사용할 수 있도록 합니다.

이 시스템은 백엔드에 Tauri와 Rust를, 프론트엔드에 React를 사용하여 구축되었으며, Anthropic의 모델(Haiku, Sonnet, Opus)을 사용하여 명령을 처리합니다.

Who it’s for

반복적인 데스크톱 작업을 자동화하거나 GUI 및 터미널과 상호작ating with GUI and terminal.

Highlights

• Dual-mode operation: 전체 데스크톱 제어와 비침해적 백그라운드 자동화 사이를 전환합니다.
• Cross-app automation: 서로 다른 소프트웨어에서 마우스를 움직이고, 클릭하고, 타이핑하고, 터미널 명령을 실행할 수 있는 능력이 있습니다.
• Native performance: Rust와 Tauri로 구축되어 효율적인 로컬 실행이 가능합니다.
• Coded shortcuts: 빠른 모드 전환 및 에이전트 제어를 위한 통합된 키보드 단축키가 제공됩니다.