AgibotTech/genie_sim

해결하는 문제

Genie Sim은 체화 지능(로보틱스) 개발을 가속화하기 위해 설계된 포괄적인 시뮬레이션 플랫폼입니다. 고정밀 환경 재구성, 합성 데이터 수집, 로봇 정책의 자동 평가를 위한 도구를 제공함으로써 물리적 하드웨어에 대한 의존도를 줄입니다.

작동 방식

이 플랫폼은 3D 재구성과 시각 생성을 통합하여 현실적인 시뮬레이션 환경을 생성합니다. 자연어 프롬프트에서 다양한 장면과 평가 구성 요소를 LLM 기반 기술로 생성합니다. ROS 2 네이티브 엔진을 기반으로 하며, 여러 물리 백엔드(예: Isaac Sim PhysX, Newton)를 지원하고 Docker 라이프사이클 및 워크스페이스 빌드를 관리하는 CLI를 포함합니다.

대상 사용자

체화 AI 개발 및 연구에 종사하는 개발자 및 연구자, 특히 로봇 조작 및 로코마니퓰레이션 정책을 구축하고 테스트하는 사람들에게 적합합니다.

주요 특징

• LLM 기반 장면 생성: 대화형 인터랙션과 자연어 프롬프트를 통해 즉시 시뮬레이션 장면을 생성합니다.
• Genie Sim 벤치마크: 10만 개 이상의 시나리오와 200개 이상의 작업을 포함한 표준화된 도구로 AI 모델의 능력 프로파일을 수립합니다.
• 고정밀 자산: 소매, 산업, 조리, 주거, 사무 환경을 아우르는 5,000개 이상의 검증된 3D 자산을 포함합니다.
• 합성 데이터 파이프라인: 1만 시간 이상의 합성 데이터와 cuRobo를 활용한 VR 원격 조작 및 자동 데이터 수집 도구를 제공합니다.
• 에이전트 준비형 SKILLs: AI 코드 에이전트(Claude Code, Cursor 등)가 인간의 개입 없이 시뮬레이터를 작동할 수 있도록 기계가 읽을 수 있는 레시피(SKILL.md)를 포함합니다.
• Sim-to-Real 전이: 합성 데이터로 훈련된 모델을 실제 로봇에 제로샷으로 전이할 수 있습니다.