Gemini Robotics 2 릴리즈 노트 / 새로운 소식

Google DeepMind는 Gemini Robotics 2를 출시했습니다. 이는 로봇을 사전 프로그래밍된 시퀀스에서 벗어나 적응 가능하고 범용적인 물리적 AI로 이동시키기 위한 인텔리전스 레이어입니다. 이번 업데이트는 인간형 로봇을 위한 전신 제어, 다양한 엔드 이펙터를 위한 고정밀 섬세함, 그리고 복잡하고 다단계 작업 실행을 위한 에이전트적 추론을 도입합니다.

Gemini Robotics 2 모델 스위트

Gemini Robotics 2는 고수준 계획부터 저수준 모터 제어까지 로봇 인텔리전스의 다양한 측면을 처리하는 세 가지 특화 모델로 구성됩니다:

  • Gemini Robotics 2 (VLA): 시각-언어-동작 모델로, 시각 및 언어 입력을 직접 모터 제어로 변환합니다. 전체 인간형 로봇 및 양팔 로봇을 지원하며, "발끝부터 손끝까지" 제어를 제공합니다.
  • Gemini Robotics ER 2 (Embodied Reasoning): 비전-언어 모델(VLM)로, 에이전트의 고수준 뇌 역할을 합니다. 인간과의 커뮤니케이션, 물리적 세계 이해, 그리고 몇 분에 걸칠 수 있는 다단계 작업 계획을 관리합니다.
  • Gemini Robotics On-Device 2 (VLA): 네트워크 지연을 없애기 위해 로컬 실행에 최적화된 효율적인 VLA 모델입니다. 빠른 적응 기능을 갖추어 몇 시간의 데이터만으로 새로운 로봇 구현에 배포할 수 있습니다.

전신 제어 및 인간형 로봇 동작

Gemini Robotics 2는 물리적 AI를 상체 테이블탑 작업에서 전신 협조로 확장합니다. 이를 통해 인간형 로봇이 인간을 위해 설계된 환경에서 물체를 탐색하고 조작할 수 있게 되며, 걷기, 웅크리기, 스트레칭과 같은 동작이 필요합니다.

Apptronik Apollo 2 인간형 로봇을 사용한 시연에서, 모델은 물뿌리개를 테이블에서 하단 선반의 특정 통으로 옮기라는 지시를 성공적으로 처리했으며, 로봇은 걸어가고 물체를 집어 정확히 놓아야 했습니다.

손과 그리퍼를 위한 고급 섬세함

시스템은 다양한 하드웨어 엔드 이펙터에 걸쳐 향상된 섬세함을 도입합니다:

  • 다지 손: Apollo 2에 장착된 22 자유도 SharpaWave 손을 사용하여, 모델은 지퍼백을 봉인하거나 매듭을 묶는 등 섬세한 작업을 수행할 수 있습니다.
  • 병렬 그리퍼: Franka Duo 플랫폼에서, 모델은 표준 두 손가락 그리퍼를 사용하여 촘촘한 포장과 같은 복잡한 섬세 작업을 가능하게 합니다.

에이전트적 추론 및 다중 로봇 협업

Gemini Robotics ER 2는 로봇이 몇 분에 걸쳐 수백 개의 결정을 포함하는 긴 작업 시퀀스를 실행하도록 합니다. 모델은 이제 작업 시작과 종료 시점을 더 잘 식별하고 실행 중 핵심 이벤트를 정확히 파악할 수 있습니다.

핵심 기능:

  • 자기 교정: 추론 모델은 로봇이 새로운 상황에 일반화하고, 시퀀스의 특정 단계가 실패할 경우 스스로 교정하도록 합니다.
  • 다중 로봇 협업: 서로 다른 유형의 로봇이 이제 통신하고 조정하여 단일 로봇의 능력을 초과하는 복잡한 워크플로를 해결할 수 있습니다.

온-디바이스 적응 및 모션 전이

Gemini Robotics On-Device 2는 "모션 전이" 기술을 활용하여 새로운 로봇 하드웨어에 빠르게 적응합니다. 모델은 일반적으로 200개 미만의 예시와 몇 시간의 적응 시간만으로 새로운 양팔 로봇 구현—센서, 형태, 자유도가 크게 다른 경우에도—에 적응할 수 있습니다. 이는 Dexmate, SO101, Trossen 플랫폼 전반에 걸쳐 시연되었습니다.

안전 프레임워크 및 ASIMOV-Agentic

Google DeepMind는 물리적 안전 조치와 AI 안전 프레임워크를 결합한 다계층 안전 접근 방식을 구현했습니다.

이 시스템을 평가하기 위해, 그들은 에이전트 안전 오케스트레이션 및 불확실성 해결을 위한 벤치마크인 ASIMOV-Agentic을 도입했습니다. 이 벤치마크는 다음을 측정합니다:

  1. 구현된 추론 에이전트가 VLA로부터의 위험한 도구 호출을 거부하는 능력.
  2. 작업이 가능한지 예측하고, 불확실할 때 사전에 인간 개입을 요청하는 능력.

Gemini Robotics ER 2는 인간 근접성 벤치마크와 안전 제약 준수 측면에서 현재까지 가장 안전한 로봇 모델로 보고되었으며, 인간이 너무 가까이 접근하면 안전 도구 호출을 트리거하고 로봇을 정지시킬 수 있습니다.

Summary

Google DeepMind는 적응형 로봇 시스템을 위해 지능적인 전신 제어, 고급 섬세함, 그리고 다중 로봇 협업을 가능하게 하는 모델 스위트를 제공하는 Gemini Robotics 2를 소개했습니다.

Title

Gemini Robotics 2 릴리즈 노트 / 새로운 소식

Sources