Genie 3 실시간 세계 모델 출시

TL;DR

Genie 3은 DeepMind의 최신 범용 세계 모델로, 실시간(24 fps, 720p)으로 풍부하고 상세한 인터랙티브 3D 환경을 생성하고 몇 분 동안 시각적 일관성을 유지합니다. 이를 통해 구현형 AI 연구와 생성 미디어에 새로운 가능성이 열립니다.

Genie 3이란?

Genie 3은 DeepMind의 이전 Genie 1 및 Genie 2 시스템을 확장한 기반 세계 모델입니다. 자연어 프롬프트로 인터랙티브한 세계를 만들고, 사용자는 720p 해상도에서 초당 24프레임으로 해당 세계를 탐색할 수 있습니다. 기존 모델과 달리 Genie 3은 실시간 제어, 장기 일관성, 그리고 물리·시각 현상의 더 넓은 범위를 지원합니다.

기술적 진보

실시간 프레임 생성

  • 모델은 전체 과거 궤적을 조건으로 삼아 각 프레임을 자동 회귀적으로 생성해, 반응형 탐색을 가능하게 합니다.
  • 매 초 여러 번 연산을 수행해 새로운 사용자 입력을 반영하고, 부드러운 24 fps 재생을 구현합니다.

장기 환경 일관성

  • Genie 3은 최대 1분까지 시각적 메모리를 유지해, 자동 회귀 비디오 생성에서 흔히 발생하는 드리프트를 방지합니다.
  • 일관성은 집을 칠하는 작업, 텔레포트 포털이 있는 빅토리아 거리, 고대 아테네를 수분 탐험하면서 정적인 요소(예: 나무)가 안정적으로 유지되는 사례에서 보여집니다.

물리적 속성 모델링

  • 물, 조명, 용암 흐름, 바람 등 자연 현상을 현실적인 역학으로 시뮬레이션합니다.
  • 샘플 프롬프트는 화산 지형 탐험, 허리케인에 휩쓸린 인도 보도, 심해 해파리 움직임을 보여줍니다.

다양한 콘텐츠 생성

  • 자연 생태계 – 숲, 빙하 호수, 해양 환경 등 믿을 만한 식생과 동물군.
  • 픽션 애니메이션 – 스타일리시한 생물, 초현실적 풍경, 극적인 세계 변형 이벤트.
  • 역사·지리적 설정 – 알프스, 베니스 운하, 크노소스 궁전, 일리노이 현대 거리 등 정확해 보이는 재구성.

시연된 능력

Capability Example Prompt Observation
물리 시뮬레이션 용암 웅덩이가 있는 화산 지형 현실적인 입자 효과와 지형 상호작용.
생태계 생성 야생동물이 있는 빙하 호수 달리기 일관된 동물 행동과 식생.
픽션 애니메이션 무지개 다리 위의 복슬복슬한 생물 스타일리시하고 고디테일 캐릭터 애니메이션.
역사 재구성 전성기 크노소스 궁전 설득력 있는 건축 디테일.
프롬프트 기반 세계 이벤트 텍스트로 날씨를 바꾸거나 물체 추가 재렌더링 없이 즉시 세계 변형.

구현형 에이전트 연구

Genie 3은 DeepMind의 SIMA 2와 같은 에이전트를 훈련시키기 위한 테스트베드 역할을 합니다. 에이전트는 모델에 탐색 행동을 전달하고, 모델은 그에 따라 세계 상태를 렌더링합니다. Genie 3이 긴 행동 시퀀스에서도 일관성을 유지하기 때문에, 에이전트는 보다 복잡하고 다단계 목표를 추구할 수 있어 개방형 커리큘럼에서 에이전트를 훈련시키는 데 한 걸음 더 다가갑니다.

제한 사항

  • 행동 공간 – 직접적인 에이전트 행동이 제한적이며, 많은 세계 변화는 여전히 텍스트 프롬프트를 통해서만 가능합니다.
  • 다중 에이전트 역학 – 여러 독립 에이전트 간 상호작용 시뮬레이션은 아직 해결되지 않은 과제입니다.
  • 지리적 정확도 – 실제 위치는 대략적으로만 재현되며 정밀한 지리적 정확성은 부족합니다.
  • 텍스트 렌더링 – 생성된 텍스트는 프롬프트에 명시적으로 포함될 때만 읽을 수 있습니다.
  • 상호작용 지속 시간 – 현재 연속 상호작용은 몇 분 정도로 제한되며, 시간 단위는 아직 지원되지 않습니다.

책임 있는 배포

DeepMind는 Genie 3을 제한된 연구 프리뷰 형태로 소수의 학계 및 창작자 그룹에 공개합니다. 이 단계적 롤아웃은 안전성, 오용 가능성, 사회적 영향을 평가하기 위한 피드백을 수집하기 위함이며, 책임 있는 개발·혁신 팀이 위험 완화 전략을 마련하고 있습니다.

향후 방향

  • 더 넓은 테스트 그룹 및 궁극적으로 일반 대중에게 접근성 확대.
  • 상호작용 지속 시간과 행동 공간을 확장해 풍부한 구현형 작업 지원.
  • 지리적 정확도와 다중 에이전트 시뮬레이션 개선.
  • 로봇공학 및 자율 시스템을 위한 교육·훈련·평가 응용 탐색.

인용

Genie 3을 인용할 경우 아래 BibTeX 항목을 사용하십시오:

@article{genie32025,
  title={Genie 3: A new frontier for world models},
  author={Ball, Phil and Bauer, Jakob and ... and Zubov, Vadim},
  journal={DeepMind Blog},
  year={2025},
  url={https://deepmind.google/blog/genie-3-a-new-frontier-for-world-models/}
}

Sources