RongLiu-Leo/beta-splatting

何を解決するか

Deformable Beta Splatting (DBS) は、3D Gaussian Splatting (3DGS) の限界、特にガウスカーネルと低次の球面調和関数 (SH) に依存するための複雑な形状や多様な色を捉える困難さに対処します。より高精度な幾何学的詳細と優れた色表現を実現しながら、メモリ使用量を削減し、レンダリング速度を向上させることを目指しています。

仕組み

DBS は標準のガウスカーネルを可変のベータカーネルに置き換えます。ベータカーネルは有界なサポートと適応的な周波数制御を備えており、より正確な幾何学的表現が可能です。また、これらのベータカーネルを色表現に拡張し、SHベースの手法と比較して拡散成分と鏡面成分をより良く表現します。さらに、特定のカーネル特性に依存せず、正則化された不透明度に依拠する分布保持型マルコフ連鎖モンテカルロ (MCMC) 稠密化技術を実装しています。

対象ユーザー

このツールは、リアルタイムのレディアンスフィールドレンダリング、3D再構築、コンピュータビジョンに取り組む研究者や開発者向けに設計されています。

主な特徴

• 高い効率性: 3DGS-MCMCのパラメータの45%しか使用せず、1.5倍速くレンダリング可能。
• 高精度: ガウスベースの手法よりも細かい幾何学的詳細と複雑な色をより効果的に捉えます。
• コンパクトなストレージ: 標準のPLYファイルと比較して、ストレージ要件を5〜6倍削減できる圧縮ユーティリティを含んでいます。
• 最先端の品質: Mip-NeRF 360 や Tanks and Temples などのさまざまなベンチマークで優れた視覚的品質を達成しています。