LogosIntelligenceLab/PVG

[IJCV 2026] Periodic Vibration Gaussian: Dynamic Urban Scene Reconstruction and Real-time Rendering

解決する課題

PVGは、ビデオデータから動的な都市環境を再構築しレンダリングするという課題に取り組みます。従来の手法では、複雑な実世界の街並みシーンで新しいカメラアングルを合成する際に、移動物体を正確に表現したり、高品質なビジュアルを維持したりすることが難しいことがよくあります。

仕組み

このプロジェクトは、周期振動ガウスと呼ばれる技術を使用します。これはガウススプラッティングに基づいて、都市シーン内の静的背景と移動物体の両方をモデル化します。周期運動パターンを組み込むことで、システムは動的要素を静的環境から効果的に分離でき、複雑な街並みシーケンスの高忠実度再構築とリアルタイムレンダリングを可能にします。

対象者

このプロジェクトは、WaymoやKITTIなどのデータセットからの動的ビデオデータを処理する必要がある、コンピュータビジョン、自動運転、3Dシーン再構築に携わる研究者や開発者を対象としています。

ハイライト

  • 動的な都市シーンに対する高品質な新規視点合成を可能にします。
  • 動的物体を静的背景から自動的に分離することをサポートします。
  • リアルタイムレンダリングパフォーマンスに最適化されています。
  • WaymoやKITTIを含む標準的な自動運転データセットと互換性があります。

関連

  • プロジェクト
    Yarroudh/segment-lidar

    segment-lidar は、Meta の SAM 3 を航空 LiDAR 点群に適用する Python パッケージです。点群を画像に投影し、自動マスクやテキスト/ボックスプロンプトを使用してオブジェクトを検出し、インスタンスラベルを元の点群に転送します。LAS/LAZ 出力およびオプションの地面フィルタリングをサポートしています。

  • プロジェクト
    tumourlove/monolith

    MCPベースのUnreal Engineプラグインで、コンテキストウィンドウの使用量を最小限に抑えるネームスペースディスパッチパターンを使用して、1,400以上のエディタアクションをAIアシスタントに公開します。

  • プロジェクト
    zju3dv/AutoRecon

    AutoReconは、RGB画像のセットから個々のオブジェクトを自動的に発見し、ニューラルSDF表面として再構成し、標準的なメッシュファイルをエクスポートする研究用パイプラインです。粗いオブジェクト分解ステージ（AutoDecomp）と、nerfstudio/sdfstudioに基づくニューラル表面再構成ステージを組み合わせており、デモ、BlendedMVS、CO3Dデータセット用の実行可能スクリプトを提供しています。

  • プロジェクト
    PozzettiAndrea/ComfyUI-Sharp

    AppleのSHARPモデル用のComfyUIラッパーで、1秒未満で1枚の画像から3Dガウシアンスプラッティングを実現します。