zhouxiaoka/autoclip

AutoClip : AI-powered video clipping and highlight generation · 一款智能高光提取与剪辑的二创工具

What it solves

AutoClip은 긴 비디오에서 짧은 형식의 콘텐츠를 만드는 번거로운 과정을 자동화합니다. 영상을 수동으로 스크러빙해 하이라이트를 찾고, 클립을 직접 자르고, YouTube와 Bilibili 같은 플랫폼용 컬렉션으로 정리하는 작업이 필요 없게 됩니다.

How it works

시스템은 비디오 다운로드 도구와 대형 언어 모델(LLM)을 결합해 콘텐츠를 처리합니다:

  1. Ingestion: YouTube 또는 Bilibili에서 비디오와 자막을 다운로드하거나 로컬 업로드를 받습니다.
  2. AI Analysis: Qwen(통의 천문) LLM을 사용해 자막과 콘텐츠를 분석하고 비디오 개요를 추출하며, 주요 토픽 타임스탬프를 식별하고 특정 구간의 "흥미도" 또는 품질을 점수화합니다.
  3. Processing: AI가 식별한 타임스탬프를 기반으로 비디오를 자동으로 클립하고 각 구간에 매력적인 제목을 생성합니다.
  4. Management: 웹 인터페이스를 제공해 클립을 검토하고, 수동으로 정렬을 조정하며, AI가 추천하는 컬렉션으로 그룹화할 수 있습니다.

Who it’s for

긴 비디오를 바이럴한 짧은 클립이나 큐레이션된 하이라이트 릴로 빠르게 전환하고 싶은 콘텐츠 제작자, 소셜 미디어 매니저, 비디오 편집자를 위한 도구입니다.

Highlights

  • Multi-platform support: YouTube와 Bilibili 다운로드를 통합 지원.
  • AI-driven clipping: LLM을 사용해 하이라이트를 자동으로 식별하고 구간을 점수화.
  • Asynchronous pipeline: Celery와 Redis를 사용해 백그라운드에서 무거운 비디오 처리 작업을 수행하고, WebSockets를 통해 실시간 진행 상황을 업데이트.
  • Full-stack management: React 기반 대시보드를 포함해 프로젝트 관리, 클립 편집, 컬렉션 조직이 가능.