ChrisChen667788/wind-comic

Multi-agent AI pipeline that turns one line of text into a finished short-form drama: script, cinematic storyboards, character-consistent video. Provider-agnostic (OpenAI/Claude, MJ, Minimax, Veo/Sora, fal, ComfyUI). MIT.

何を解決するか

Wind Comic は、1行のテキストを完全な完成したショートフォームドラマに変換するマルチエージェントAIスタジオです。AIビデオクリップを手動でつなぎ合わせる必要をなくし、スクリプト作成、キャラクター設計、ストーリーボード作成、音声合成、最終ビデオ編集を含む、すべてのプロダクションプロセスを自動化したワンストップワークフローを提供します。

動作方法

このシステムは、専門的なAI役割(ライター、ディレクター、プロデューサー、キャラクターデザイナー、ストーリーボードアーティストなど)が厳格な一貫性契約に基づいてタスクを引き継ぐマルチエージェントパイプラインとして動作します。プロセスはテキスト → JSON → 画像 → MP4ファイルへと流れます。主な技術的特徴は以下の通りです:

  • マルチエンジンオーケストレーション: 12以上のメディアエンジン(Kling、MiniMax、Veoなど)と統合され、「マルチエンジンレース」をサポート。品質が高い最初のクリップが勝ちます。
  • ディレクターのコントロールルーム: 上から見た舞台に俳優とカメラを配置できる視覚的インターフェースで、正確なステージング指示とレイアウトスケッチを生成します。
  • 品質ループ: 70点未満のショットを自動的に再生成する「ビジョン・オーディット」リトライループと、アスペクト比、再生時間、ビットレートの健康状態を監視するレポートシステム。
  • リップシンクパイプライン: TTS音声をビゼムキーフレームトラックに変換し、同期させ、プラグイン可能なエンジン(wav2lip や SadTalker など)でレンダリングするプロセス。
  • リアルタイムコラボレーション: Yjs CRDTを駆動するマルチプレイヤー時間軸によるチーム編集を可能にします。

対象ユーザー

高品質なショートフォーム映画コンテンツや商業広告を、複数のAIツールを手動で管理せずに制作したいコンテンツクリエイター、映画監督、マーケター向けに構築されています。

主な特徴

  • エンドツーエンドのプロダクション: 1つのプロンプトからスクリプト、キャスト、ストーリーボード、音声合成、最終MP4を生成します。
  • キャラクターの一貫性: 「DNAアイデンティティロック」機能付きのキャラクタースタジオと、プロジェクト間で再利用可能なキャラクターをサポート。
  • 高度なディレクティングツール: 精密なブロッキングが可能なディレクターコンソールと、全体の再レンダリングなしに特定フレームを編集できるセグメントリテイク機能。
  • 商業広告工場: eコマース広告向けの専用ツール。URLから自動的にビューポイントを生成、フックのA/Bテスト、広告法規制に準拠するフィルタリングを実装。
  • BYO LLM: 環境変数で独自のLLMプロバイダーを導入可能。コード変更は一切不要。

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト