SkyworkAI/Matrix-Game

Matrix-Game 3.0: Real-Time and Streaming Interactive World Model with Long-Horizon Memory

해결하는 문제

Matrix-Game은 고품질의 장기 비디오와 인터랙티브 환경을 생성할 수 있는 인터랙티브 월드 모델을 만드는 것을 목표로 합니다. 메모리 메커니즘을 통해 시간이 지나도 일관성을 유지하는 스트리밍 실시간 인터랙티브 월드를 만드는 과제를 해결합니다.

작동 방식

이 프로젝트는 진화하는 일련의 모델로 구성됩니다:

  • Matrix-Game-1.0은 월드 모델 시리즈의 초기 오픈소스 릴리스입니다.
  • Matrix-Game-2.0은 인터랙티브 월드 기반 모델로서 실시간 장기 비디오 생성에 중점을 둡니다.
  • Matrix-Game-3.0은 실시간 상호작용을 지원하기 위해 장기 메모리를 갖춘 스트리밍 인터랙티브 월드 모델을 도입합니다.

대상 사용자

월드 모델, 생성 비디오, 인터랙티브 AI 환경을 연구하는 연구자와 개발자를 위한 것입니다.

주요 특징

  • 실시간 상호작용: 인터랙티브 월드의 스트리밍 및 실시간 생성을 지원합니다.
  • 장기 메모리: Matrix-Game-3.0에는 긴 시퀀스에서 일관성을 유지하기 위한 메모리 기능이 포함되어 있습니다.
  • 기반 모델 접근 방식: 인터랙티브하고 긴 형식의 비디오 콘텐츠를 생성하기 위한 기반을 제공합니다.

관련

  • 프로젝트
    TNTwise/REAL-Video-Enhancer

    다양한 전용 모델과 다중 GPU 백엔드를 지원하는 AI 기반 동영상 프레임 보간 및 확대를 위한 크로스플랫폼 GUI 애플리케이션입니다.

  • 프로젝트
    AIMixer/ComfyUI_MiniMaxH3_Director

    ComfyUI를 위한 전문 디렉터 콘솔로, 시각적 타임라인과 다중 세그먼트 관리를 통해 MiniMax H3 모델을 사용한 장편 영상 생성을 간소화합니다.

  • 프로젝트
    feitangyuan/onetake

    onetake는 Claude 호환 AI 스킬로, 원테이크 제품 출시 또는 데모 비디오를 생성합니다. UI를 HTML로 재구축하고, 측정된 모션 프리미티브 라이브러리를 사용하며, 사실적인 모션 블러와 룸 기반 사운드를 추가하고, 오라클로 연속성을 자동 점수화합니다. git clone으로 설치할 수 있으며, Python, Node, 선택적 Whisper/TTS 내레이션과 함께 작동합니다. 비상업적 사용은 무료입니다. 상업적 사용에는 유료 Pro 라이선스가 필요합니다.

  • 프로젝트
    majidmanzarpour/threejs-game-skills

    Codex와 Claude Code용 스킬 팩으로, AI 에이전트가 완전한 Three.js 브라우저 게임을 구축, 다듬고 검증할 수 있게 합니다. `npx skills add …` (또는 제공된 `install.sh`)로 설치한 후, 자연어 요청(예: "미래 지향적 타워 디펜스 게임 생성")으로 `threejs-game-director`를 프롬프트하세요. 디렉터는 게임플레이, AAA 그래픽스, UI, 자산 생성(옵션 Tripo/Gemini/ElevenLabs API), 디버깅, QA 전문 서브스킬을 조율하며, 번들된 Vite+TypeScript 스크래치와 Playwright 기반 테스트 허브를 사용합니다. 데모에는 Neon Ridge Drift, Snooker Arena, Starship Dogfight 등이 있습니다. MIT 라이선스.