SkyworkAI/Matrix-Game

Matrix-Game 3.0: Real-Time and Streaming Interactive World Model with Long-Horizon Memory

解决的问题

Matrix-Game 旨在创建交互式世界模型，以生成高质量、长程的视频和交互环境。它通过记忆机制解决了创建流式、实时交互世界并随时间保持一致性的挑战。

工作原理

该项目包含一系列不断演进的模型：

  • Matrix-Game-1.0 作为世界模型系列的初始开源版本。
  • Matrix-Game-2.0 专注于实时长视频生成，作为交互式世界基础模型。
  • Matrix-Game-3.0 引入具有长程记忆的流式交互世界模型，以支持实时交互。

适用对象

适用于研究世界模型、生成式视频和交互式 AI 环境的研究人员和开发者。

亮点

  • 实时交互：支持流式和实时生成交互世界。
  • 长程记忆：Matrix-Game-3.0 包含记忆能力，以维持长序列的一致性。
  • 基础模型方法：提供生成交互式长视频内容的基础。

相关

  • 项目
    TNTwise/REAL-Video-Enhancer

    一款支持多种 GPU 后端和多种专用模型的跨平台 GUI 应用程序，用于 AI 驱动的视频帧插值和超分辨率。

  • 项目
    AIMixer/ComfyUI_MiniMaxH3_Director

    一个为 ComfyUI 设计的专业导演控制台，通过可视化时间轴与多片段管理，简化使用 MiniMax H3 模型进行长视频生成的流程。

  • 项目
    feitangyuan/onetake

    onetake 是一个与 Claude 兼容的 AI 技能，用于生成单次拍摄的产品发布或演示视频。它将 UI 重建为 HTML，使用测量过的运动原语库，添加逼真的运动模糊和基于房间的声音，并通过 oracle 自动评分连续性。可通过 git clone 安装，适用于 Python、Node，并可选用 Whisper/TTS 进行旁白。非商业用途免费；商业用途需付费的 Pro 许可证。

  • 项目
    majidmanzarpour/threejs-game-skills

    一个为 Codex 和 Claude Code 设计的技能包，让 AI 代理能够构建、打磨并验证完整的 Three.js 浏览器游戏。通过 `npx skills add …`（或提供的 `install.sh`）安装后，使用自然语言请求（例如“创建一个未来风格的塔防游戏”）向 `threejs-game-director` 发出提示。该导演协调游戏玩法、AAA 图形、UI、资产生成（可选 Tripo/Gemini/ElevenLabs API）、调试和 QA 专业子技能，使用捆绑的 Vite+TypeScript 脚手架和基于 Playwright 的测试框架。演示包括 Neon Ridge Drift、Snooker Arena、Starship Dogfight 等。MIT 许可证。