Meshroom: 一个用于 3D 重建和计算机视觉流水线的基于节点的视觉编程框架

它解决了什么问题

Meshroom 是一个视觉编程框架，旨在简化复杂数据处理流水线的创建和管理，特别是针对 3D 重建和计算机视觉任务。它消除了编写代码来链接各种算法的需求，允许用户通过视觉连接节点来定义工作流。

工作原理

该软件使用节点系统，其中每个节点代表一个特定的操作。用户通过边连接这些节点以定义数据流。该系统包含一套属性系统，当属性被修改时，仅使下游节点失效，从而允许系统重用缓存的中间结果以节省计算时间。它支持本地执行和在渲染农场上的分布式处理。

适用人群

它专为需要使用计算机视觉和机器学习算法进行 3D 重建、相机追踪和图像处理的研究人员、开发人员和艺术家设计。

亮点

• 基于节点的的工作流: 用于构建流水线的视觉图编辑器。
• 3D 重建: 内置插件，可将 2D 照片转换为 3D 模型、相机位置和场景几何结构。
• AI 驱动的插件: 集成了用于图像分割、单目深度估计和鲁棒密集特征匹配 (RoMa) 的基础模型。
• 3D Gaussian Splatting: 支持从多视图图像创建 Gaussian splat 表示。
• 地理空间集成: 能够提取 GPS 数据并集成真实世界的地图和高程模型以进行地理参考。
• 智能缓存: 节点的智能失效机制，以最大限度地减少不必要的计算。