video-production-buddy/video-production-buddy

何を解決するか

Video Production Buddy (織影) は、ユーザーが1つのプロンプトを入力して使い勝手のある結果を期待するという「プロンプトから動画」のギャンブルに対処します。このブラックボックスアプローチを、計画、レビュー、承認を含む構造的で管理されたAI動画制作パイプラインに置き換えます。初期の要件定義や脚本からアセット生成、最終レンダリングまで、すべての段階を検証・承認した上で、高コストな生成にリソースを費やす前に進める仕組みです。

動作方法

このシステムは汎用AIアシスタントを動画プロデューサーに変換します。YAMLマニフェストとMarkdownベースの「ディレクター技能」を使用して、アシスタントを段階的なワークフローに導きます。通常、以下の流れを経ます：

1. 発見：チャットインターフェースとGenUIでターゲット層、好み、制約を明確化。
2. 設計：AIがトレンド、参考資料、制作知識を収集し、計画を構築。
3. 計画：アシスタントが要件定義書、提案書、脚本を作成。
4. 実行：Pythonツールがプロバイダールーティング（画像、動画、音声、音楽）、メディア分析、アセット生成を処理。
5. 編集：RemotionやHyperFramesのようなコンポジションランタイムで最終動画をレンダリング。
6. 検証：レビュー用エージェントとレンダリング後のチェックで忠実度と一貫性を検証。

対象ユーザー

1回のプロンプトで動画を生成するツールの代替として、検証可能で再現可能なプロセスを求めるクリエイター、マーケター、開発者向けです。特に広告、解説動画、短編ソーシャルコンテンツの制作に適しています。

特徴

• エージェント最優先設計：AIアシスタントがオーケストレーターとして機能し、ツールとプロバイダーのレジストリを使って具体的な作業を実行。
• バックロット・ライブストーリーボード：ローカルでファイルベースのボードで、制作段階、脚本、アセットをリアルタイムで可視化可能。
• 参考に基づく計画：YouTubeやTikTokなどの既存動画を分析し、新規制作に向けたテンポ、インパクトポイント、スタイルを抽出可能。
• プロバイダー対応実行：適合性と利用可能なAPIキーに基づき、Runway、Kling、ElevenLabsなど異なるプロバイダーにタスクを動的にルーティング。
• ゼロキーモード：クラウドAPIキーがなくても、Piper TTS、Remotion、FFmpegを用いたローカルレンダリングとナレーションをサポート。