microsoft/BiomedParse

解决的问题

BiomedParse 是一个为全面生物医学图像分析设计的基础模型。它提供了一种统一的方法，可在多种成像模态中执行生物医学对象的分割、检测和识别，减少了对不同医学成像任务使用独立模型的需求。

工作原理

该模型采用文本引导的方法来识别和分割对象。在版本 2 中，它引入了 BoltzFormer 架构，以改善小对象的分割，并支持端到端的 3D 体积推理。它可以逐切片处理 3D 体积，对每个切片周围的邻近 3D 上下文进行编码。此外，它还包含一个内置的对象存在检测模块，无需额外的掩码检查即可识别假阳性。

适用人群

适用于需要在 CT、MRI、超声、PET 和显微镜等多种模态下分析复杂生物医学数据的研究人员和实践者。

主要亮点

• 多模态支持：支持包括 CT、MRI、超声、PET 以及多种显微技术在内的九种模态。
• 广泛的解剖覆盖：v2 版本支持超过 200 个解剖结构。
• SOTA 3D 性能：在 3D 生物医学图像分割中达到最先进水平。
• 统一框架：将分割、检测和识别整合为单一工具。