hanna-xu/U2Fusion

해결하는 문제

U2Fusion은 단일 통합 네트워크에서 여러 이미지 융합 작업을 처리하도록 설계되었습니다. 가시광선 및 적외선(VIS-IR) 이미지, 의료 이미지, 노출이 다른 이미지, 초점이 다른 이미지 등 동일한 장면의 다양한 이미지 정보를 하나의 고품질 이미지로 결합하는 문제를 해결합니다.

작동 방식

비지도 이미지 융합 네트워크를 사용합니다. 이는 훈련을 위해 쌍을 이루는 정답 라벨 없이도 이미지를 융합하는 방법을 학습할 수 있음을 의미하며, 완벽한 참조 이미지를 구하기 어려운 이미지 융합 작업에서 중요한 이점입니다.

대상 독자

컴퓨터 비전 및 이미지 처리 분야의 연구원과 개발자, 특히 장면 이해도를 높이기 위해 다중 모달 또는 다중 노출 이미지를 융합해야 하는 사용자를 위한 프로젝트입니다.

주요 특징

• 통합 아키텍처: 단일 네트워크로 VIS-IR, 의료, 다중 노출 및 다중 초점 융합을 처리할 수 있습니다.
• 비지도 학습: 레이블이 지정된 훈련 데이터의 필요성을 제거합니다.
• PyTorch 구현 제공: 이 프로젝트는 PyTorch 사용자를 위한 별도의 리포지토리를 제공합니다.