ZiYang-xie/WorldGen

🌍 WorldGen - Generate Any 3D Scene in Seconds

What it solves

WorldGen 允许用户仅通过简单的文字提示或 2D 图像，在几秒钟内创建完整的 3D 场景。它消除了手动 3D 建模的需求，使游戏、模拟、机器人和虚拟现实的沉浸式环境能够快速生成。

How it works

WorldGen 通过一个能够将文字或图像处理成 3D 表征的管线来生成 3D 场景。它内部支持从 360° 全景图（等距矩形）生成场景，并使用 DA-2 进行 360° 深度估计和 FLUX.1-dev 进行图像生成。系统可以将场景输出为 Gaussian Splatting（.ply）或 3D mesh，提供灵活的渲染和实时探索。

Who it’s for

此工具面向游戏、VR/AR 与机器人行业的开发者和创作者，帮助他们快速原型化 3D 环境或为模拟生成合成数据。

Highlights

  • Instant Generation: 在几秒钟内从文字或图像创建完整 3D 场景。
  • 360° Exploration: 支持一致的自由视点探索与闭环。
  • Versatile Scene Support: 适用于室内和室外环境，包括写实和风格化场景。
  • Flexible Output: 同时支持 Gaussian Splatting 与 mesh 生成，以满足不同渲染需求。
  • Low VRAM Mode: 包含针对显存低于 24GB（约使用 10GB）的 GPU 模式。
  • Real-time Rendering: 支持任意分辨率的实时渲染和自定义相机轨迹。