prov-gigatime/GigaTIME

GigaTIME: Multimodal AI generates virtual population for tumor microenvironment modeling (Cell)

何を解決するか

GigaTIMEは腫瘍微小環境モデリングのための「仮想集団」プロファイルを生成するように設計されています。具体的には、広く利用可能な通常のH&E病理スライドから空間的プロテオミクス(mIF)を予測する問題を解決し、高価で複雑な空間的プロテオミクス実験の必要性を排除します。

仕組み

このプロジェクトは、H&E染色病理画像を仮想マルチプレックス免疫蛍光(mIF)マップに変換するクロスモーダル翻訳ツールを提供します。モデルには以下の2つのバージョンがあります:

  • GigaTIME:元のCNNベースのモデル。
  • GigaTIME-Flash:GigaPath-Flashに基づく効率的なバージョン。推論速度が6倍速く、GPUメモリ使用量が8分の1に抑えられ、予測品質も向上しています。

対象ユーザー

病理学および医療画像分野に特化したAI研究者で、関連するCell論文の実験結果を再現したい、またはこの研究を基に腫瘍微小環境解析を進めていきたい方々。

特徴

  • クロスモーダル翻訳:通常のH&Eスライドを仮想mIFプロファイルに変換。
  • 効率的な推論:GigaTIME-Flashは計算負荷を大幅に削減しつつ品質を向上。
  • 全スライド対応:タイリングとステッチングをサポートし、スライドレベルの仮想mIFマップ生成を可能に。
  • 研究志向:研究環境での腫瘍微小環境モデリングに特化して設計。

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト