cvg/DeepLSD

何を解決するか

DeepLSDは「リアルな世界」の画像から高精度な線分を抽出する課題に対処します。深層学習手法（通常は堅牢だが精度は低い）と手作業で設計された検出器（正確だがノイズや複雑なシーンに対して脆弱な傾向がある）の間のギャップを埋めます。

動作方法

システムは画像から線分距離と角度フィールドを予測します。これらの深層画像勾配を最適化プロセスと組み合わせることで、汎用的な線分を検出でき、他の検出器によって既に検出された線分を精度向上のために精緻化できます。

対象ユーザー

このツールは、3D再構成、視覚的局所化、ホモグラフィ推定などのタスクに高精度な幾何学的情報が必要な開発者や研究者向けに設計されています。

特徴

• ハイブリッドアプローチ：深層学習の堅牢性と手作業検出器の正確性を組み合わせます。
• 線分の精緻化：他のツールで既に検出された線分を最適化・精緻化できます。
• 事前学習済みモデル：室内シーン向けの Wireframe および汎用的な屋外シーン向けの MegaDepth で学習済みのモデルを含みます。
• 評価スイート：複数のデータセットで低レベルの線分検出および消失点推定の評価に使える組み込みツールを提供します。