a312863063/Video-Auto-Wipe

해결하는 문제

이 프로젝트는 자막, 로고, 애니메이션 아이콘과 같은 원치 않는 고정 패턴 콘텐츠를 자동으로 제거하고, 누락된 영역을 채워 동영상의 외관을 복원하는 방법을 제공합니다.

작동 방식

시스템은 두 단계의 학습 프로세스를 사용합니다. 먼저 시간적 인지 학습을 통해 모델이 전경 요소(삭제할 콘텐츠)를 식별할 수 있도록 합니다. 그런 다음 이를 제거 모델에 통합하여 엔드투엔드 미세 조정을 수행합니다.

다양한 콘텐츠 유형에 따라 다른 탐지 방법을 사용합니다:

• 자막: 일관된 텍스트 스타일을 가진 영역을 인식하여 식별.
• 로고: 시간이 지나도 정지된 픽셀 블록을 감지하여 식별.
• 동적 아이콘: 깜빡이거나 동적으로 움직이는 고정된 픽셀 블록을 감지하여 식별.

대상 사용자

수동 마스킹 없이 동영상의 방해 요소인 오버레이, 자막, 워터마크를 정리하고 싶은 사용자.

주요 특징

• 자동 탐지: 수동 입력이 아닌 자동으로 자막과 로고의 위치를 인식.
• 시간적 일관성: 시간적 검색 및 보완 기능을 사용해 세부 사항과 텍스트 없는 영역을 복원.
• 사용자 정의 학습 데이터: 3,000개 이상의 영화 및 예능 프로그램 클립과 합성된 전경 오버레이를 포함한 데이터셋으로 구축.