chn-lee-yumi/MaterialSearch

해결하는 문제

MaterialSearch를 사용하면 사용자가 자연어 설명이나 기존 이미지를 사용하여 로컬에 저장된 사진 및 동영상 컬렉션을 검색할 수 있습니다. 수동 태깅이나 복잡한 폴더 구조 없이도 특정 시각적 미디어를 찾을 수 있습니다.

작동 원리

시스템은 로컬 디렉토리의 이미지와 동영상을 스캔하고 CLIP 기반 모델(특히 chinese-clip-vit-base-patch16)을 사용하여 검색 가능한 임베딩을 생성합니다. 텍스트-이미지, 이미지-이미지, 텍스트-동영상, 이미지-동영상 검색을 지원하며, 동영상 검색 시 제공된 쿼리를 기반으로 특정 클립이나 세그먼트를 식별합니다.

대상 사용자

방대한 로컬 시각적 자산 라이브러리를 관리하며, 기존 파일 이름이나 메타데이터에 의존하지 않고 AI 기반의 빠른 방식으로 특정 콘텐츠를 검색하고자 하는 개인을 위해 설계되었습니다.

주요 특징

• 멀티모달 검색: 텍스트 설명과 이미지 샘플을 모두 사용하여 이미지와 동영상을 검색할 수 있습니다.
• 동영상 세그먼트 검색: 동영상 파일 전체가 아닌 동영상 내의 특정 클립을 찾을 수 있습니다.
• 하드웨어 유연성: CPU (amd64)에서 작동하며 더 빠른 처리를 위해 GPU 가속을 지원합니다.
• 간편한 배포: 사전 패키징된 Windows 번들 또는 Docker 이미지를 제공하여 설정을 간소화했습니다.