robocasa/robocasa

해결하는 문제

RoboCasa는 범용 로봇을 훈련하고 벤치마킹하기 위해 설계된 대규모 시뮬레이션 환경을 제공합니다. 이는 로봇이 일상적인 가사 업무, 특히 주방 환경 내에서 업무를 수행하는 데 필요한 다양하고 고품질의 훈련 데이터와 현실적인 시나리오를 생성하는 문제를 해결합니다.

작동 방식

이 프레임워크는 시뮬레이션 백엔드(RoboSuite)를 사용하여 방대한 종류의 시나리오를 생성합니다. 여기에는 2,500개 이상의 주방 장면과 3,200개의 3D 물체가 포함됩니다. 학습을 촉진하기 위해 365개의 LLM 가이드 작업과 600시간 이상의 인간 데모 및 1,600시간의 자동 로봇 궤도를 포함한 광범위한 데모 데이터를 제공합니다. 또한 프레임별 서브태스크 주석(원자적 기술, 단계 및 자연어 지침에 대한 레이블)을 통해 계층적 정책 학습을 지원합니다.

대상

이 도구는 체화된 지능(embodied intelligence)을 위한 AI 정책을 훈련하는 로봇 공학 연구자 및 개발자, 특히 범용 로봇 조작 및 가사 업무 수행에 초점을 맞추는 분들을 위한 것입니다.

주요 특징

• 대규모 스케일: 다양한 훈련을 위한 2,500개 이상의 주방 장면 및 3,200개의 3D 물체.
• 광범위한 데이터셋: 총 2,200시간 이상의 데모 데이터.
• LLM 가이드 작업: 대규모 언어 모델의 도움으로 설계된 365개의 고유 작업.
• 벤치마킹 지원: Diffusion Policy, pi, GR00T와 같은 인기 있는 정책 학습 방법에 대한 통합 지원.