jayin92/Skyfall-GS

[ECCV 2026] Skyfall-GS: Synthesizing Immersive 3D Urban Scenes from Satellite Imagery

What it solves

Skyfall-GS 解决了创建大规模、几何精确的 3D 城市场景的难题。传统上，这需要昂贵的 3D 扫描或标注，而这些数据在大规模上极少可得。该项目仅使用易获取的卫星影像和开放域的 diffusion 模型，即可合成沉浸式的 3D 城市环境。

How it works

该框架分为两个主要阶段：

  1. Reconstruction：首先利用卫星影像建立城市场景的粗糙 3D 几何。
  2. Synthesis with Iterative Dataset Update (IDU)：采用课程驱动的细化策略，使用 diffusion 模型生成高质量的特写纹理，并逐步提升几何完整度与写实度。

最终输出为 3D 模型（以融合的 PLY 文件提供），可用于实时、沉浸式探索。

Who it’s for

此工具面向从事具身 AI 应用、城市规划仿真以及沉浸式 3D 环境生成的研究人员和开发者。

Highlights

  • No 3D Annotations：无需昂贵的手动 3D 标注即可创建大规模场景。
  • Hybrid Approach：结合卫星数据的结构精度与生成式 diffusion 模型的视觉质量。
  • Real-time Exploration：支持对合成城市环境的实时 3D 导航。
  • Iterative Refinement：使用特定的 IDU 策略，确保跨视角的一致性和真实纹理。