OStudi/short-video-generator-AI

Free open-source project designed for turning youtube-viedos into viral short videos. Highlight detection, subtitles, translation, voiceover, all in one for your content.

해결하는 문제

장시간 YouTube 동영상이나 로컬 파일을 바이럴적인 짧은 동영상(9:16)으로 변환하기 위한 무료이고 오픈소스 대안을 제공합니다. 고임팩트 순간 찾기, 동영상 자르기, 자막 추가와 같은 번거로운 과정을 자동화합니다.

작동 방식

  1. 음성 인식: faster-whisper를 사용해 동영상의 타임스탬프가 있는 자막을 생성합니다.
  2. 콘텐츠 분석: LLM(OpenAI, Gemini, 또는 MuAPI)이 동영상 유형(예: 팟캐스트, 튜토리얼)을 분류하여 하이라이트 탐지에 최적화합니다.
  3. 바이럴성 순위 매기기: LLM이 바이럴성 프레임워크를 사용해 자막을 스캔하여 감정의 정점, 흥미 유발 요소, 놀라운 발견을 식별하고 점수 기준으로 순위를 매깁니다.
  4. 선택 및 처리: 시스템은 겹치는 클립을 중복 제거하고 상위-N개 후보를 선택한 후 원하는 비율로 자동 자릅니다.
  5. 강화: 선택적으로 클립 시작 부분에 AI 생성 훅을 추가합니다.

대상 사용자

구독형 AI 클리핑 도구의 비용을 지불하지 않고도 긴 동영상을 기반으로 짧은 소셜 미디어 콘텐츠를 자동 생성하고 싶은 콘텐츠 크리에이터.

주요 기능

  • 다중 LLM 지원: OpenAI, Gemini, MuAPI와 호환됩니다.
  • 자동 하이라이트 탐지: 바이럴성 기반 알고리즘으로 가장 매력적인 순간을 찾습니다.
  • 유연한 입력 지원: YouTube URL과 로컬 동영상 파일 모두 지원합니다.
  • 유연한 인터페이스: 명령줄 인터페이스(CLI)와 로컬 웹 기반 UI를 모두 제공합니다.
  • 사용자 정의 가능한 출력: 클립 수, 해상도, 비율을 자유롭게 조정할 수 있습니다.

관련

  • 프로젝트
  • 프로젝트
  • 프로젝트
  • 프로젝트
  • 프로젝트