프로젝트 지니 스트리트 뷰 통합

Google DeepMind는 Google Street View 이미지를 Project Genie에 통합하여, 범용 세계 모델이 실제 위치에 기반한 인터랙티브 환경을 생성할 수 있게 했습니다. 이 업데이트를 통해 AI 에이전트와 로봇은 시뮬레이션된 공간 내에서 실제 세계의 복잡성을 탐색하고 상호작용할 수 있으며, 사용자는 생성 스타일을 통해 물리적 위치를 재구상할 수 있는 도구를 제공받습니다.

스트리트 뷰를 통한 실제 기반

Project Genie는 이제 Maps Imagery Grounding 기술을 활용하여 생성된 세계를 실제 물리적 위치에 기반하도록 합니다. 사용자는 미국 내 위치를 지도 핀으로 선택하고, “Desert Sands”, “Stone Age”, “B&W film”과 같은 특정 스타일과 결합하여 실제 장소를 상상적인 환경으로 변환할 수 있습니다.

Key capabilities of this grounding feature include:

  • Location-Based Generation: 모델은 Street View 이미지를 인터랙티브 세계를 만들기 위한 시작점으로 사용합니다.
  • Stylized Environments: 사용자는 실제 위치에 테마 오버레이를 적용할 수 있습니다. 예를 들어 Golden Gate Bridge를 “Ocean World” 스타일로 시각화하거나 Fort Worth Stockyards를 1920년대 “B&W film” 스타일로 나타낼 수 있습니다.
  • Character Integration: 사용자는 캐릭터(예: 만화 영웅 또는 클레이메이션 몬스터)를 설명하여 이러한 기반 환경에 배치할 수 있습니다.

현재 Street View 이미지 통합은 미국 내 위치에만 제공되며, 향후 추가 지역으로 확장할 계획입니다.

세계 모델로서의 프로젝트 지니

Genie는 범용 세계 모델 연구를 위한 기본 도구 역할을 합니다. 다양하고 인터랙티브한 환경을 생성하는 능력은 이미 여러 고영향 사용 사례에 적용되었습니다:

  • Agent Training: AI 에이전트가 복잡한 가상 환경 내에서 학습하고 추론할 수 있도록 지원합니다 (SIMA 2에서 확인됨).
  • Autonomous Driving: Waymo가 초현실적인 도로 환경을 시뮬레이션하는 데 도움을 줍니다.

이용 가능성 및 접근

새로운 Street View 기반 기능을 포함한 Project Genie는 Google Labs에서 호스팅되는 실험적 연구 프로토타입입니다. 현재 전 세계적으로 자격이 있는 Google AI Ultra 구독자(18세 이상)에게 순차적으로 제공되고 있습니다.

프로토타입 단계이기 때문에 Google DeepMind는 생성된 환경의 선명도와 정확성을 향상시키기 위해 모델을 지속적으로 개선하고 있습니다.

Sources