microsoft/BiomedParse

BiomedParse: A Foundation Model for Joint Segmentation, Detection, and Recognition of Biomedical Objects Across Nine Modalities

何を解決するか

BiomedParse は包括的な生物医学画像解析向けの基礎モデルです。異なる画像モダリティにわたる生物医学的オブジェクトのセグメンテーション、検出、認識を統一されたアプローチで実行できるように設計されており、さまざまな医療画像タスクに別々のモデルを必要としなくても済むようにします。

動作方法

このモデルはテキストガイドドアプローチを用いてオブジェクトを識別・セグメンテーションします。バージョン2では、BoltzFormerアーキテクチャを採用し、小規模オブジェクトのセグメンテーションを改善し、エンドツーエンドの3Dボリューム推論をサポートしています。3Dボリュームをスライスごとに処理し、各スライスの周囲の3Dコンテキストをエンコードします。また、別途マスクのチェックを必要とせずに偽陽性を検出できる組み込みのオブジェクト存在検出モジュールも搭載しています。

対象ユーザー

CT、MRI、超音波、PET、顕微鏡などのさまざまなモダリティで複雑な生物医学データを分析する必要がある生物医学分野の研究者や実務家向けです。

主な特徴

  • マルチモダリティ対応: CT、MRI、超音波、PET、およびさまざまな顕微鏡技術を含む9つのモダリティで動作します。
  • 広範な解剖学的カバー範囲: v2では200以上の解剖学的構造をサポートします。
  • SOTA 3D性能: 3D生物医学画像セグメンテーションにおいて最先端の性能を達成します。
  • 統合フレームワーク: セグメンテーション、検出、認識を1つのツールに統合しています。

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト