cvg/resplat

何を解決するか

ReSplatは、画像から3Dガウススプラットを効率的に予測する課題に対処します。高品質な再構成に必要なガウス数を削減するとともに、テスト時における反復的精緻化を通じてシーン表現を改善するメカニズムを提供します。

動作方法

ReSplatはフィードフォワード再帰モデルを使用します。まず、サブサンプリングされた空間でガウスを予測するコンパクトな初期化から始め、従来のピクセルごとの方法よりもはるかに少ないガウス数を使用します。その後、レンダリング誤差を勾配フリーのフィードバック信号として使用し、重み共有の再帰モジュールを用いてガウスパラメータの更新を反復的に予測します。

対象ユーザー

このプロジェクトは、3Dシーン再構成、コンピュータビジョン、ニューラルレンダリングに取り組む研究者および開発者向けです。特にガウススプラッティング技術を活用している方々を対象としています。

特徴

• コンパクトな初期化: サブサンプリングされた空間でガウスを予測し、従来のピクセルごとの方法よりも16倍少ないガウス数を使用します。
• 再帰的精緻化: 勾配を必要とせず、レンダリング誤差に基づいてガウスを重み共有モジュールで精緻化します。
• テスト時適応: 推論プロセス中に3D表現の反復的改善を可能にします。