inspatio/querysplat

何を解決するか

QuerySplatは、幾何学と外観表現を分離することで、画像から3Dガウススプラッティング（3DGS）表現を予測する課題に対処し、より正確な3Dシーン再構成を可能にします。

動作方法

このシステムは、前向きモデルを使用して3Dガウスを予測し、レンダリングします。VGGT-Omegaと統合され、画像符号化、カメラ予測、深度予測を実行します。パイプラインにはカスタム画像前処理が含まれており、LPIPSなどの再構成目的に基づいて予測された3Dシーンをさらに精緻化するためのオプションのテスト時最適化（TTO）ステップも提供します。

対象ユーザー

このプロジェクトは、特に3Dガウススプラッティングおよびニューラルシーン表現に注力する3Dコンピュータビジョン分野の研究者や開発者向けに設計されています。

特徴

• 幾何学と外観を分離することで、より良い3DGS予測を実現。
• 高速な前向き推論と、精緻化されたテスト時最適化（TTO）の両方をサポート。
• VGGT-Omegaと統合され、堅牢なカメラおよび深度推定を実現。
• ガウスのPLYファイルのエクスポートや、不透明度およびスケール分布の分析を可能にするツールを提供。