ChrisChen667788/wind-comic
Multi-agent AI pipeline that turns one line of text into a finished short-form drama: script, cinematic storyboards, character-consistent video. Provider-agnostic (OpenAI/Claude, MJ, Minimax, Veo/Sora, fal, ComfyUI). MIT.
何を解決するか
Wind Comic は、1行のテキストを完全な完成したショートフォームドラマに変換するマルチエージェントAIスタジオです。AIビデオクリップを手動でつなぎ合わせる必要をなくし、スクリプト作成、キャラクター設計、ストーリーボード作成、音声合成、最終ビデオ編集を含む、すべてのプロダクションプロセスを自動化したワンストップワークフローを提供します。
動作方法
このシステムは、専門的なAI役割(ライター、ディレクター、プロデューサー、キャラクターデザイナー、ストーリーボードアーティストなど)が厳格な一貫性契約に基づいてタスクを引き継ぐマルチエージェントパイプラインとして動作します。プロセスはテキスト → JSON → 画像 → MP4ファイルへと流れます。主な技術的特徴は以下の通りです:
- マルチエンジンオーケストレーション: 12以上のメディアエンジン(Kling、MiniMax、Veoなど)と統合され、「マルチエンジンレース」をサポート。品質が高い最初のクリップが勝ちます。
- ディレクターのコントロールルーム: 上から見た舞台に俳優とカメラを配置できる視覚的インターフェースで、正確なステージング指示とレイアウトスケッチを生成します。
- 品質ループ: 70点未満のショットを自動的に再生成する「ビジョン・オーディット」リトライループと、アスペクト比、再生時間、ビットレートの健康状態を監視するレポートシステム。
- リップシンクパイプライン: TTS音声をビゼムキーフレームトラックに変換し、同期させ、プラグイン可能なエンジン(wav2lip や SadTalker など)でレンダリングするプロセス。
- リアルタイムコラボレーション: Yjs CRDTを駆動するマルチプレイヤー時間軸によるチーム編集を可能にします。
対象ユーザー
高品質なショートフォーム映画コンテンツや商業広告を、複数のAIツールを手動で管理せずに制作したいコンテンツクリエイター、映画監督、マーケター向けに構築されています。
主な特徴
- エンドツーエンドのプロダクション: 1つのプロンプトからスクリプト、キャスト、ストーリーボード、音声合成、最終MP4を生成します。
- キャラクターの一貫性: 「DNAアイデンティティロック」機能付きのキャラクタースタジオと、プロジェクト間で再利用可能なキャラクターをサポート。
- 高度なディレクティングツール: 精密なブロッキングが可能なディレクターコンソールと、全体の再レンダリングなしに特定フレームを編集できるセグメントリテイク機能。
- 商業広告工場: eコマース広告向けの専用ツール。URLから自動的にビューポイントを生成、フックのA/Bテスト、広告法規制に準拠するフィルタリングを実装。
- BYO LLM: 環境変数で独自のLLMプロバイダーを導入可能。コード変更は一切不要。
関連
- プロジェクト
- プロジェクト
- プロジェクト
- プロジェクト
- プロジェクト