通过 3D Gaussian Splatting 实现 Grace Cathedral 的数字化保存

通过 3D Gaussian Splatting 实现 Grace Cathedral 的数字化保存

使用 Gaussian Splatting 进行高保真建筑重建

Vincent Woo 开发了一个沉浸式的 Grace Cathedral 3D 导览,展示了 3D Gaussian Splatting (3DGS) 在历史建筑数字化保存方面的有效性。该项目结合了摄影测量技术和现代渲染技术,以捕捉复杂的细节,包括传统上难以进行 3D 建模的彩色玻璃窗和反射效果。

技术实现与工具链

Grace Cathedral 的重建是使用 PlayCanvas 引擎构建的。虽然主要来源中没有详细说明大教堂的具体工作流程,但 Vincent Woo 的类似项目——例如 Sutro Tower 的 3D 扫描——揭示了创建这些 "splats" 的一致技术流程:

  1. 数据采集:从多个角度拍摄目标物体的数千张照片(通常对外部结构使用无人机)。
  2. 图像对齐:使用 RealityCapture 等软件进行对齐,通过识别不同图像之间的对应点来建立空间关系。
  3. 模型生成:利用 gsplat 库来生成最终的 3D Gaussian Splat 模型。

关键视觉能力

与传统的基于网格的渲染相比,3D Gaussian Splatting 为建筑导览提供了若干优势:

  • 复杂材质处理:该技术在捕捉反射和玻璃的半透明感方面表现出色。在 Grace Cathedral 模型中,彩色玻璃窗的色彩和神韵得到了高保真度的保留。
  • 细节密度:该模型达到了极高的细节水平,可以实现复杂内部元素的视觉化,包括 Keith Haring 的祭坛画。
  • 交互式功能:导览包含一个 "cutaway Peek" 功能,提供建筑的剖面视图。

社区见解与评论

技术观察者和用户都指出了当前展示形式的优势和局限性:

  • 视觉保真度:用户注意到了 "crazy level of detail"(极高的细节水平)以及展示在标准 3D 重建中经常丢失的反射效果的能力。
  • 导航约束:一些用户对 "on-rails"(轨道式)的演示风格表示不满,认为这使得某些特定细节(如祭坛画)难以进行近距离观察。
  • 比较背景:这种方法被视为早期虚拟导览(如 Notre Dame 的 VRML 演示)的现代演进,从表面纹理映射转向了更具体积感、更逼真的照片级表现形式。

"This showcases one of my favorite parts of 3dgs which is reflections and glass. The color and essence of the stained glass comes through so well."

数字化保存中的应用

该项目作为历史遗址数字化存档的原理验证。通过将物理空间转换为高保真度的 splats,机构可以为后代保留建筑物的视觉状态,并为全球观众提供无物理限制的虚拟导览服务。

Sources