OStudi/short-video-generator-AI

Free open-source project designed for turning youtube-viedos into viral short videos. Highlight detection, subtitles, translation, voiceover, all in one for your content.

何を解決するか

長時間のYouTube動画やローカルファイルを、バズりやすい短い動画(9:16)に変換するための、有料SaaSツールの無料でオープンソースの代替品を提供します。高インパクトな瞬間の検出、動画のクロップ、字幕の追加といった面倒なプロセスを自動化します。

動作方法

  1. 音声認識: faster-whisper を使用して、動画のタイムスタンプ付きの字幕を作成します。
  2. コンテンツ分析: LLM(OpenAI、Gemini、または MuAPI)により、動画の種類(例:ポッドキャスト、チュートリアル)を分類し、ハイライト検出のパラメータを最適化します。
  3. バズ性スコアリング: LLMがバズ性フレームワークを使用して字幕をスキャンし、感情の高まり、インパクトのある導入部分、驚きの発見を特定し、スコアでランク付けします。
  4. 選択と処理: システムは重複するクリップを除外し、上位N個の候補を選定し、希望のアスペクト比に自動的にクロップします。
  5. 強化: オプションで、AI生成のインパクトのある導入部分をクリップの先頭に追加します。

対象ユーザー

サブスクリプション型AIクリッピングツールの費用を支払わず、長時間の動画から短いSNSコンテンツを自動生成したいクリエイター。

特徴

  • 複数のLLM対応: OpenAI、Gemini、MuAPIに対応。
  • 自動ハイライト検出: バズ性に基づくアルゴリズムで、最も魅力的な瞬間を検出。
  • 柔軟な入力対応: YouTube URLとローカル動画ファイルの両方をサポート。
  • 柔軟なインターフェース: コマンドラインインターフェース(CLI)とローカルWeb UIの両方を提供。
  • カスタマイズ可能な出力: クリップ数、解像度、アスペクト比を自由に制御可能。

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト