Project Genie: Google DeepMind의 인터랙티브 월드 모델 프로토타입

Google DeepMind는 Project Genie를 공개했습니다. 이 실험적 연구 프로토타입은 사용자가 인터랙티브하고 실시간으로 생성되는 세계를 만들고 탐험할 수 있게 합니다. 현재 이 도구는 미국(18세 이상)에서 Google AI Ultra 구독자에게 제공됩니다.

Genie 3를 통한 실시간 월드 시뮬레이션

Project Genie는 Genie 3 월드 모델을 기반으로 하며, 환경의 동역학을 시뮬레이션하고 행동이 그 환경의 상태에 어떻게 영향을 미치는지 예측합니다. 정적인 3D 스냅샷과 달리 Genie 3는 사용자가 이동하고 세계와 상호작용할 때 실시간으로 앞쪽 경로를 생성합니다.

이 기능을 통해 다음과 같은 다양한 시나리오를 시뮬레이션할 수 있습니다:

  • 로봇 시뮬레이션
  • 애니메이션 및 픽션 모델링
  • 역사적 배경 및 특정 장소 탐험

Project Genie의 핵심 기능

Project Genie는 Genie 3, Nano Banana Pro, Gemini를 통합한 웹 애플리케이션으로, 세 가지 주요 사용자 기능을 제공합니다:

1. 월드 스케치

사용자는 텍스트, 생성된 이미지 또는 업로드된 이미지를 프롬프트로 사용해 살아있는 확장 가능한 환경을 만들 수 있습니다. 이 기능을 통해 캐릭터와 탐험 방법(예: 걷기, 타기, 날기, 운전)을 정의할 수 있습니다.

Nano Banana Pro와의 통합으로 "World Sketching"이 가능해지며, 사용자는 이미지를 미리 보고 수정해 세계의 외관을 미세 조정하고, 환경에 들어가기 전에 캐릭터 시점(1인칭 또는 3인칭)을 선택할 수 있습니다.

2. 월드 탐험

Project Genie는 사용자의 행동에 따라 실시간으로 탐색 가능한 환경을 생성합니다. 사용자는 생성된 공간을 이동하면서 카메라 시점을 조정할 수 있습니다.

3. 월드 리믹스

사용자는 기존 프롬프트를 기반으로 세계를 새로운 해석으로 리믹스할 수 있습니다. 플랫폼에는 큐레이션된 세계 갤러리와 영감을 위한 무작위 아이콘이 포함되어 있습니다. 또한 사용자는 탐험 및 만든 세계의 영상을 다운로드할 옵션도 제공합니다.

현재 제한 사항 및 책임 있는 개발

초기 연구 프로토타입인 Project Genie와 기반이 되는 Genie 3 모델에는 다음과 같은 알려진 제한 사항이 있습니다:

  • Visual and Physical Fidelity: 생성된 세계가 항상 실물과 일치하거나 프롬프트, 이미지, 실제 물리 법칙을 엄격히 따르지는 않을 수 있습니다.
  • Control and Latency: 캐릭터가 때때로 낮은 제어성 또는 높은 지연을 보일 수 있습니다.
  • Duration: 현재 생성 길이는 60초로 제한됩니다.
  • Feature Gaps: 8월에 발표된 일부 기능(탐험 중 세계를 변화시키는 프롬프트 가능한 이벤트 등)은 아직 프로토타입에 포함되지 않았습니다.

Google DeepMind는 이번 출시의 목표가 AI 연구와 생성 미디어에서 월드 모델이 어떻게 활용될지에 대한 이해를 높이는 것이라고 밝혔습니다.

Sources