LichtFeld-Studio: 3D Gaussian Splatting シーンのトレーニング、編集、および自動化のためのモジュール式ワークステーション

LichtFeld-Studio: 3D Gaussian Splatting シーンのトレーニング、編集、および自動化のためのモジュール式ワークステーション

何を解決するか

LichtFeld Studio は、3D Gaussian Splatting (3DGS) ワークフロー全体のための、統合されたネイティブアプリケーションを提供します。トレーニング、リアルタイム可視化、およびシーン編集を単一のツールチェーンに組み合わせることで、個別のトレーニングスクリプト、スタンドアロンのビューアー、および編集ツールを切り替える必要性を排除します。

仕組み

C++23 と CUDA 12.8+ で構築されており、ユーザーは COLMAP データセットから新しいシーンをトレーニングし、チェックポイントから再開することができます。再構成された結果をリアルタイムで検査し、gaussian サブセットを選択して変換し、結果を PLY、SOG、および SPZ などの形式、またはスタンドアロンの HTML ビューアーにエクスポートするインタラクティブな環境を提供します。

対象ユーザー

  • 研究者: 再構成の品質を反復的に改善し、MCMC 最適化や bilateral grid 外観モデリングなどの高度な機能をテストする人々。

  • プロダクションチーム: ポータブルなエクスポートを提供するために、gaussian の選択範囲を視覚的に検査し、編集する必要があるプロフェッショナル。

  • ツールビルダー: Python プラグインシステムと MCP 駆動の自動化を介して、ソフトウェアをより大きなパイプラインに統合する開発者。

ハイライト

  • 統合ワークフロー: トレーニング、リアルタイム検査、および編集を一つのネイティブアプリに集約。
  • 拡張性: カスタムツールやパネルのための Python プラグインをサポート。
  • 自動化: MCP リソースとツールを通じて、ローカルツールやエージェントと統合。
  • 研究機能: 3DGUT 歪んだカメラモデルとタイムラプス生成のサポートを含む。
  • ネイティブパフォーマンス: モダンな C++ と CUDA を使用して NVIDIA GPU に最適化。

Sources