StanfordMIMI/Merlin

解決する課題

Merlinは、CTスキャンのための専門的な基盤モデルとして、3D画像、構造化された電子健康記録（EHR）、非構造化の放射線レポートなど、多様な医療データソースを統合し、複雑な医療分析を実行するというニーズに応えます。

仕組み

これは、構造化されたEHRデータと非構造化の放射線レポートの両方で事前学習された3D視覚言語モデル（VLM）です。モデルは、初期化時に画像埋め込み、表現型分類、疾患予測、レポート生成などの異なるコンポーネントを有効にすることで、特定のタスクに合わせて構成できます。

対象ユーザー

CT画像、放射線レポートの自動化、予測医療分析に携わる医療AI研究者と臨床医。

主な特徴

• 3D CTスキャン分析をサポート。
• 放射線レポートの生成が可能。
• 表現型分類と5年後の疾患予測を実行。
• コミュニティ利用のための公開された腹部CTデータセットを含む。
• セグメンテーションタスクのためにnnU-Netフレームワークと統合。