zhouxiaoka/autoclip

AutoClip : AI-powered video clipping and highlight generation · 一款智能高光提取与剪辑的二创工具

What it solves

AutoClip은 긴 비디오에서 짧은 형식의 콘텐츠를 만드는 번거로운 과정을 자동화합니다. 영상을 수동으로 스크러빙해 하이라이트를 찾고, 클립을 직접 자르고, YouTube와 Bilibili 같은 플랫폼용 컬렉션으로 정리하는 작업이 필요 없게 됩니다.

How it works

시스템은 비디오 다운로드 도구와 대형 언어 모델(LLM)을 결합해 콘텐츠를 처리합니다:

  1. Ingestion: YouTube 또는 Bilibili에서 비디오와 자막을 다운로드하거나 로컬 업로드를 받습니다.
  2. AI Analysis: Qwen(통의 천문) LLM을 사용해 자막과 콘텐츠를 분석하고 비디오 개요를 추출하며, 주요 토픽 타임스탬프를 식별하고 특정 구간의 "흥미도" 또는 품질을 점수화합니다.
  3. Processing: AI가 식별한 타임스탬프를 기반으로 비디오를 자동으로 클립하고 각 구간에 매력적인 제목을 생성합니다.
  4. Management: 웹 인터페이스를 제공해 클립을 검토하고, 수동으로 정렬을 조정하며, AI가 추천하는 컬렉션으로 그룹화할 수 있습니다.

Who it’s for

긴 비디오를 바이럴한 짧은 클립이나 큐레이션된 하이라이트 릴로 빠르게 전환하고 싶은 콘텐츠 제작자, 소셜 미디어 매니저, 비디오 편집자를 위한 도구입니다.

Highlights

  • Multi-platform support: YouTube와 Bilibili 다운로드를 통합 지원.
  • AI-driven clipping: LLM을 사용해 하이라이트를 자동으로 식별하고 구간을 점수화.
  • Asynchronous pipeline: Celery와 Redis를 사용해 백그라운드에서 무거운 비디오 처리 작업을 수행하고, WebSockets를 통해 실시간 진행 상황을 업데이트.
  • Full-stack management: React 기반 대시보드를 포함해 프로젝트 관리, 클립 편집, 컬렉션 조직이 가능.

관련

  • 프로젝트
    Anil-matcha/AI-Youtube-Shorts-Generator

    AI‑YouTube‑Shorts‑Generator는 긴 YouTube 동영상(또는 로컬 파일)을 TikTok/Reels/YouTube Shorts용으로 최적화된 세로형 짧은 클립으로 자동 변환하는 오픈소스 Python 도구입니다. 동영상을 다운로드하고 Whisper로 음성 인식을 수행한 후, OpenAI, Gemini 또는 MuAPI의 모델을 사용해 '바이러스성'이 있을 만한 순간을 LLM 기반으로 평가합니다. 겹치는 후보를 중복 제거하고 각 하이라이트를 9:16(또는 원하는 비율)로 자동 자릅니다. 두 가지 모드 제공: 다운로드, 음성 인식, 평가, 자르기를 MuAPI에 위임하는 'API 모드'(설정 없음)와 `yt‑dlp`, `faster‑whisper`, OpenCV/ffmpeg, 외부 LLM을 로컬에서 실행하는 '로컬 모드'. CLI는 MP4 파일과 함께 각 클립의 점수, 핵심 문장, 이유를 반환하며, 상세한 JSON 파일도 출력 가능합니다. MIT 라이선스로, 크리에이터, 에이전시, 개발자가 자체 클리핑 SaaS를 구축하는 데 적합합니다.

  • 프로젝트
    modelscope/FunClip

    ASR과 LLM을 사용하여 음성 텍스트, 화자 ID 또는 AI 기반 콘텐츠 분석에 따라 동영상 세그먼트를 추출하는 오픈소스 자동 동영상 클리핑 도구입니다.

  • 프로젝트
    JefferyHcool/BiliNote

    Bilibili, YouTube 및 기타 플랫폼의 동영상을 자동 요약과 스크린샷이 포함된 구조화된 Markdown 노트로 변환하는 AI 기반 동영상 노트 툴.

  • 프로젝트
    wendy7756/AI-Video-Transcriber

    AI 비디오 번역기는 FastAPI 기반의 웹앱(CLI/MCP 지원)으로, YouTube, TikTok, Bilibili, 팟캐스트 등에서 자막을 추출하거나 Whisper를 실행한 후, OpenAI 호환 LLM을 사용해 번역문을 최적화하고 필요 시 번역하며 다국어 요약을 생성합니다. 동시에 원본 비디오를 병렬로 다운로드할 수 있으며, Docker 또는 간단한 설치 스크립트로 사용 가능하며, 프로그래밍 가능한 엔드포인트(REST API, CLI, 또는 MCP)를 제공합니다.