scu-zjz/IMDLBenCo

[NeurIPS'24 Spotlight] A comprehensive benchmark & codebase for Image manipulation detection/localization.

해결하는 문제

IMDL-BenCo는 이미지 수정 탐지 및 국소화(IMDL)를 위한 표준화된 프레임워크를 제공합니다. 이미지가 수정되었는지 여부를 식별하고, 픽셀 단위로 수정된 영역을 정확히 위치하는 데 필요한 포괄적이고 모듈화된 코드베이스 및 벤치마크의 부족을 해결합니다.

작동 방식

이 프로젝트는 IMDL 파이프라인을 표준화되고 재사용 가능한 구성 요소로 분해합니다. 이 모듈식 접근 방식은 연구자들이 모델 구축 파이프라인을 쉽게 사용자 정의하고 구축할 수 있도록 합니다. 코드베이스에는 다양한 최첨단(SOTA) 모델의 학습 코드가 포함되어 있어, 다양한 포렌식 기법을 비교할 수 있는 포괄적인 벤치마크를 구축합니다.

대상 사용자

AI 생성 콘텐츠 및 전통적인 이미지 수정을 포함한 이미지 위조를 탐지하고 국소화하는 데 종사하는 컴퓨터 비전 연구자 및 포렌식 분석가.

주요 특징

  • 모듈식 아키텍처: 재사용 가능한 구성 요소로 프레임워크를 분해하여 개발 효율성과 맞춤형 설정을 향상.
  • 포괄적인 벤치마크: 다양한 SOTA 모델의 구현을 포함하여 분야의 신뢰할 수 있는 기준을 제공.
  • PyPI 배포: pip install imdlbenco로 간편하게 설치 및 통합 가능한 Python 라이브러리로 제공.
  • 학술적 인정: NeurIPS 2024 Track Datasets and Benchmarks에서 스파크루 패퍼로 채택.

관련

  • 프로젝트
    NaturalIntelligence/imglab

    COCO 및 Pascal VOC과 같은 형식을 지원하는 웹 기반 이미지 라벨링 도구로, 객체 탐지기 학습을 위한 훈련 데이터를 생성합니다.

  • 프로젝트
    lingxitong/MIL_BASELINE

    계산 기반 병리학에서 다중 인스턴스 학습(MIL)을 위한 통합 라이브러리로, 전체 슬라이드 이미지 분석을 위한 다양한 MIL 아키텍처를 구현하고 비교할 수 있는 표준화된 프레임워크를 제공합니다.

  • 프로젝트
    rafal-qa/slopo

    Slopo는 코드 임베딩 모델(Jina AI, Voyage AI, 또는 로컬 Ollama)을 사용하여 저장소 전체에서 의미적으로 유사한 코드 조각을 찾는 Python 기반 CLI입니다. 소스 파일을 인덱싱하고, 벡터 임베딩을 계산하고, 유사한 스니펫을 클러스터링하며, 사람의 검토를 사람이나 AI 코딩 에이전트가 검토할 수 있도록 Markdown 또는 요약된 보고서를 출력합니다. 설치는 `uv tool install slopo`를 통해 이루어지며, 설정은 `slopo init`으로 수행합니다. 이 도구는 리팩토링을 돕고 AI 토큰 사용량을 줄이기 위해 숨겨진 비정형 코드 중복을 탐지지합니다.

  • 프로젝트
    bcmi/Image-Harmonization-Dataset-iHarmony4

    iHarmony4라는 대규모 이미지 조화 데이터셋과 DoveNet의 PyTorch 구현을 제공하여, 합성 이미지에 삽입된 객체가 자연스럽게 보이도록 하는 모델 개발을 지원합니다.

  • 프로젝트
    mjkwon2021/CAT-Net

    JPEG 압축 아티팩트를 분석하여 이미지 조작을 탐지하고 국소화하는 네트워크로, 이미지 포렌식 연구를 위한 도구를 제공합니다.