inspatio/querysplat

repo for QuerySplat

解決的問題

QuerySplat 透過解耦幾何與外觀表示,解決了從影像中預測 3D 高斯點陣(3DGS)表示的挑戰,進而實現更精確的 3D 場景重構。

工作原理

該系統使用前向模型預測 3D 高斯並進行渲染。它與 VGGT-Omega 集成,用於影像編碼、相機預測與深度預測。管道包含自訂影像預處理,並提供可選的測試時優化(TTO)步驟,以基於 LPIPS 等重構目標進一步優化預測的 3D 場景。

適用對象

本專案專為從事 3D 電腦視覺的研究人員與開發者設計,特別是專注於 3D 高斯點陣與神經場景表示的領域。

主要亮點

  • 解耦幾何與外觀,實現更佳的 3DGS 預測。
  • 支援快速前向推論與精細化的測試時優化(TTO)。
  • 與 VGGT-Omega 集成,實現穩健的相機與深度估計。
  • 提供導出高斯 PLY 檔案及分析不透明度與尺度分佈的工具。

相關

  • 專案
  • 專案
  • Dispatch
  • 專案
  • Dispatch