Meshroom: 一個用於 3D 重建與電腦視覺管線的節點式視覺化程式設計框架

它解決了什麼問題

Meshroom 是一個視覺化程式設計框架，旨在簡化複雜數據處理管線的建立與管理，特別是針對 3D 重建與電腦視覺任務。它消除了編寫程式碼來串聯各種演算法的需求，允許使用者透過視覺化連接節點來定義工作流程。

運作原理

該軟體使用節點系統，其中每個節點代表一個特定的操作。使用者透過邊（edges）連接這些節點以定義數據流。系統包含一套屬性機制，當屬性被修改時，僅會使下游節點失效，從而允許系統重複使用快取的中間結果以節省計算時間。它支援本地執行以及在渲染農場（render farms）上的分散式處理。

目標對象

它專為需要使用電腦視覺與機器學習演算法來進行 3D 重建、相機追蹤與影像處理的研究人員、開發者與藝術家而設計。

重點功能

• 節點式工作流程：用於建立管線的視覺化圖形編輯器。
• 3D 重建：內建插件，可將 2D 照片轉換為 3D 模型、相機位置與場景幾何結構。
• AI 驅動插件：整合了用於影像分割、單目深度估計與強健密集特徵匹配（RoMa）的基礎模型。
• 3D Gaussian Splatting：支援從多視角影像建立 Gaussian splat 表示法。
• 地理空間整合：能夠提取 GPS 數據並整合真實世界地圖與高程模型以進行地理參考。
• 智能快取：對節點進行智能失效處理，以最小化不必要的計算。