zhouxiaoka/autoclip

What it solves

AutoClip は、長時間の動画からショートフォームコンテンツを作成する手間のかかるプロセスを自動化します。映像を手動でスクラブしてハイライトを探したり、クリップを手作業で切り出したり、YouTube や Bilibili などのプラットフォーム向けにコレクションに整理する必要がなくなります。

How it works

システムは動画ダウンロードツールと大規模言語モデル（LLM）を組み合わせてコンテンツを処理します：

1. Ingestion：YouTube または Bilibili から動画と字幕をダウンロードするか、ローカルアップロードを受け付けます。
2. AI Analysis：Qwen（通義千問）LLM を使用して字幕とコンテンツを分析し、動画のアウトラインを抽出し、重要トピックのタイムスタンプを特定し、特定セグメントの「興奮度」や品質をスコアリングします。
3. Processing：AI が特定したタイムスタンプに基づいて自動的に動画をクリップし、各セグメントにキャッチーなタイトルを生成します。
4. Management：Web インターフェースでクリップを確認し、手動で並び替えを調整し、AI 推奨のコレクションにグループ化できます。

Who it’s for

長時間動画をバイラルなショートクリップやキュレーションされたハイライトリールに迅速に変換したいコンテンツクリエイター、ソーシャルメディアマネージャー、動画編集者向けです。

Highlights

• Multi-platform support：YouTube と Bilibili のダウンロードを統合。
• AI-driven clipping：LLM を使用してハイライトを自動的に識別し、セグメントをスコアリング。
• Asynchronous pipeline：Celery と Redis を使用し、バックグラウンドで重い動画処理タスクを処理し、WebSockets を通じてリアルタイムで進捗を更新。
• Full-stack management：React ベースのダッシュボードを含み、プロジェクト管理、クリップ編集、コレクションの整理が可能。