prov-gigatime/GigaTIME

해결하는 문제

GigaTIME는 종양 미세환경 모델링을 위한 '가상 인구' 프로파일을 생성하도록 설계되었습니다. 특히, 일반적으로 보급된 H&E 병리 슬라이드에서 공간적 단백질체학(mIF)을 예측하는 문제를 해결하여, 고가이고 복잡한 공간적 단백질체학 실험의 필요성을 제거합니다.

작동 방식

이 프로젝트는 H&E 염색 병리 이미지를 가상의 멀티플렉스 면역형광(mIF) 지도로 변환하는 크로스모달 번역기(교차 모달 번역 모델)를 제공합니다. 모델은 두 가지 버전으로 구성됩니다:

• GigaTIME: 원래의 CNN 기반 모델.
• GigaTIME-Flash: GigaPath-Flash 기반의 효율적인 버전으로, 추론 속도가 6배 빨라지고 GPU 메모리 사용량이 8배 줄어들며 예측 품질이 향상되었습니다.

대상 사용자

병리학 및 의료 영상 분야에 특화된 AI 연구자로서, 관련된 Cell 논문의 실험 결과를 재현하거나, 이 연구를 기반으로 종양 미세환경 분석을 진행하고자 하는 분들.

주요 특징

• 크로스모달 번역: 일반적인 H&E 슬라이드를 가상 mIF 프로파일로 변환.
• 효율적인 추론: GigaTIME-Flash는 계산 부담을 크게 줄이면서도 품질을 향상시킵니다.
• 전 슬라이드 대응: 타일링과 스티칭을 지원하여 슬라이드 수준의 가상 mIF 지도 생성이 가능합니다.
• 연구 중심: 연구 환경에서 종양 미세환경 모델링에 특화되어 설계되었습니다.