suyiiyii/AutoGLM-GUI

해결하는 문제

AutoGLM-GUI는 AI를 사용하여 Android 기기를 제어하기 위한 그래픽 인터페이스와 자동화 프레임워크를 제공합니다. 모바일 기기를 AI 기반 생산성 도구로 변환하여, 사용자가 자연어를 통해 복잡한 작업을 수행하고, 반복적인 동작을 예약하며, ADB (Android Debug Bridge)에 대한 깊은 기술적 지식 없이도 단일 대시보드에서 여러 기기를 관리할 수 있게 합니다.

작동 원리

이 시스템은 USB 또는 WiFi를 통해 Android 기기에 연결됩니다(Android 11 이상은 QR 코드 페어링 지원). OpenAI 호환 LLM API를 사용하여 사용자 요청을 해석하고 이를 화면상의 작업으로 변환합니다. 두 가지 주요 작동 모드를 제공합니다.

• Classic Mode: 단일 비전 모델이 이해, 계획, 실행의 전체 루프를 처리합니다.
• Layered Agent Mode: '계획 레이어'가 고수준 추론과 작업 분해를 담당하고, '실행 레이어'가 실제 화면 관찰 및 상호 작용에 집중하는 2계층 아키텍처입니다.

저지연 화면 미러링 및 수동 제어를 위해 scrcpy를 통합했으며, Docker를 통해 배포할 경우 24/7 자동화를 위한 Cron 스타일 스케줄러가 포함되어 있습니다.

대상 사용자

• 일반 사용자: 반복적인 모바일 작업(예: 음식 주문, 가격 확인)을 AI 비서에게 맡기고 싶은 분.
• 개발자/QA 엔지니어: 앱 테스트 및 회귀 테스트를 위해 AI 기반 UI 자동화가 필요한 분.
• 파워 유저: 홈 서버(NAS/VPS)를 운영하며 모바일 앱을 24/7 자동화하고 싶은 분.

주요 특징

• Scheduled Tasks: 매일 체크인이나 주기적인 모니터링을 자동화하는 내장 Cron 시스템.
• Multi-Device Management: 여러 Android 기기를 동시에 제어하며 상태를 격리하여 관리.
• MCP Protocol Support: Claude Desktop 및 Cursor와 같은 AI 앱과의 통합을 허용하는 내장 Model Context Protocol 서버.
• Workflow Management: 자주 사용하는 복잡한 작업을 재사용 가능한 워크플로우로 저장하여 원클릭 실행 가능.
• Docker Deployment: x64/ARM64 아키텍처를 지원하여 안정적인 서버 측 24/7 운영 가능.
• Wireless Pairing: Android 11 이상 기기를 위한 QR 코드 기반 페어링 제공으로 케이블 연결 불필요.