ZiYang-xie/WorldGen

🌍 WorldGen - Generate Any 3D Scene in Seconds

What it solves

WorldGen 允許使用者僅透過簡單的文字提示或 2D 圖像，在數秒內建立完整的 3D 場景。它消除了手動 3D 建模的需求，讓遊戲、模擬、機器人與虛擬實境的沉浸式環境能快速產生。

How it works

WorldGen 透過一條能將文字或圖像轉換為 3D 表徵的管線來產生 3D 場景。它內部支援從 360° 全景圖（等距矩形）生成場景，並使用 DA-2 進行 360° 深度估計與 FLUX.1-dev 進行圖像生成。系統可將場景輸出為 Gaussian Splatting（.ply）或 3D mesh，提供彈性的渲染與即時探索。

Who it’s for

此工具設計給遊戲、VR/AR 與機器人產業的開發者與創作者，讓他們能快速原型化 3D 環境或為模擬產生合成資料。

Highlights

  • Instant Generation: 在數秒內從文字或圖像建立完整 3D 場景。
  • 360° Exploration: 支援一致的自由視點探索與迴路閉合。
  • Versatile Scene Support: 可用於室內與室外環境，包含寫實與風格化場景。
  • Flexible Output: 同時支援 Gaussian Splatting 與 mesh 生成，以滿足不同渲染需求。
  • Low VRAM Mode: 提供低於 24GB VRAM（約使用 10GB）的 GPU 模式。
  • Real-time Rendering: 支援任意解析度的即時渲染與自訂相機軌跡。