SimReady 에셋을 활용한 로봇 픽 앤 플레이스 시뮬레이션 구축
개요
SimReady 에셋은 질량, 충돌 메시, 조인트 드라이브와 같이 로봇 시뮬레이션에 필요한 물리적 속성이 포함된 사전 구성된 OpenUSD 파일을 제공합니다. NVIDIA Isaac Sim 내에서 이러한 에셋을 활용함으로써 개발자는 픽 앤 플레이스 작업과 같은 복잡한 작업 생성을 가속화할 수 있습니다. 이 워크플로우는 AI 에이전트를 사용하여 필요한 제어 코드를 생성하고, UR17G 로봇 팔과 Robotiq 2F-140 그리퍼를 조립하여 음료수 캔을 조작하는 방법을 보여줍니다.
SimReady 에셋 이해하기
SimReady Foundation은 에셋이 시뮬레이션 환경에서 안정적으로 작동하기 위해 필요한 기술 사양을 정의합니다. 이러한 사양은 다음 세 가지 계층으로 구성됩니다.
- 프로필(Profile): 사용 사례를 정의합니다(예: 로봇 본체).
- 기능(Features): 제어 가능한 조인트와 같은 필수 기능을 지정합니다.
- 요구 사항(Requirements): 조인트 드라이브 설정과 같은 특정 속성에 대한 검증 확인을 설정합니다.
SimReady Central의 에셋에는 이러한 요구 사항을 충족함을 확인하는 검증 보고서가 포함되어 있어 시뮬레이션 개발자에게 표준화된 기준을 제공합니다.
시뮬레이션 구축하기
픽 앤 플레이스 시뮬레이션을 구축하려면 개발자는 검증된 에셋과 작업별 코드를 결합해야 합니다. 이 과정은 세 가지 주요 단계로 구성됩니다.
1. 에셋 획득
SimReady Central에서 필요한 로봇 팔, 그리퍼, 객체 모델을 다운로드합니다. Isaac Sim이 모든 지원 파일과 메타데이터를 찾을 수 있도록 전체 에셋 폴더를 그대로 유지하는 것이 중요합니다.
2. 장면 조립
Isaac Sim 내에서 로봇과 환경을 조립합니다. 이는 수동으로 수행하거나 Isaac Sim의 Python 서버를 사용하는 AI 에이전트를 통해 수행할 수 있습니다. 에이전트는 isaac-sim-remote 및 usd-articulation과 같은 특정 기술을 활용하여 팔과 그리퍼를 단일 제어 가능한 어셈블리로 연결합니다. 작업 실행을 진행하기 전에 조인트 제한 및 드라이브 설정을 확인하는 것이 필수적입니다.
3. 작업 실행 및 테스트
장면이 구성되면 AI 에이전트에게 픽 앤 플레이스 제어 로직을 생성하고 실행하도록 지시할 수 있습니다. 작업 시퀀스에는 일반적으로 대상 접근, 접촉 기반 파지, 들어 올리기, 이동, 객체 놓기가 포함됩니다.
시뮬레이션 고려 사항
에이전트가 생성한 시뮬레이션의 성능을 평가할 때 개발자는 다음과 같은 특정 제약 조건을 고려해야 합니다.
- 물리 및 접촉: 객체가 표면에 올바르게 놓여 있는지, 이동 중에 그리퍼가 접촉을 유지하는지 확인하십시오.
- 스크립트 로직: 이 예제는 고정된 드라이브 노력 제한과 사전 정의된 웨이포인트를 사용합니다. 객체 변형, 액체 움직임 또는 센서 기반 경로 재계획과 같은 실제 변수는 고려하지 않습니다.
- 검증: 전체 동작 주기 동안 객체를 유지할 수 있는지와 같은 성공 기준에 따라 픽 앤 플레이스 시퀀스의 정확성을 항상 검증하십시오.
추가 개발을 위해 사용자는 제공된 제출 가이드라인을 따라 SimReady Central에 자신의 에셋을 기여하거나, 프론티어 AI 모델을 사용하여 CAD 파일에서 SimReady 에셋을 만드는 방법을 배울 수 있습니다.