HKUST-SAIL/Gaussian-Splatting-with-Stochastic-Solids

解決する課題

このプロジェクトは、Gaussian Splattingにおけるジオメトリの固定という課題に取り組み、3Dガウス表現から高品質なメッシュを抽出できるようにします。標準的なGaussian Splatting技術と比較して、再構成された表面の精度を向上させることを目的としています。

仕組み

このシステムは「Stochastic Solids」を利用してGaussian Splattingのジオメトリを固定します。再構成プロセスを洗練させるために、以下のようないくつかの高度なコンポーネントを統合しています。

• 2DGSおよびPGSRからの損失関数項。
• GOF (Gaussian Opacity Fields) からの緻密化戦略。
• Mip-Splattingからのフィルター。
• レンダリングを改善するためのオプションの球状ガウス（Spherical Gaussian）外観モデル。
• 学習された表現を実用的な3Dメッシュに変換するためのMarching Tetrahedra (CGAL経由) を使用したメッシュ抽出プロセス。

対象ユーザー

このツールは、3Dシーン再構成、新規視点合成、および点群ベースの表現からの高忠実度メッシュ抽出に取り組んでいるコンピュータビジョンおよびグラフィックスの研究者や開発者向けに設計されています。

ハイライト

• Marching Tetrahedraによる高品質なメッシュ抽出をサポート。
• DTUやTanks and Templesなどの標準的なデータセットと互換性があります。
• ジオメトリの固定と外観モデリングのための複数の最先端技術を統合。
• 結果を可視化するためのSIBRフレームワークベースの専用ビューアを提供。