ChrisChen667788/wind-comic

Multi-agent AI pipeline that turns one line of text into a finished short-form drama: script, cinematic storyboards, character-consistent video. Provider-agnostic (OpenAI/Claude, MJ, Minimax, Veo/Sora, fal, ComfyUI). MIT.

解決する課題

ほとんどのAIビデオツールは、単一のプロンプトから短く断片的なクリップを生成するだけです。Wind Comicは、単一のテキスト行を、スクリプト、キャラクター設定、絵コンテ、ボイスオーバー、そして最終的なMP4ファイルを含む、完全でまとまりのある短尺ドラマに変換することで、エンドツーエンドの制作問題を解決します。

仕組み

このシステムは、専門のエージェント(Writer、Director、Character Designerなど)が厳格な一貫性契約に基づいてタスクを引き継ぐ、誠実なマルチエージェントパイプラインを使用しています。ワークフローは、Text $ ightarrow$ JSON $ ightarrow$ PNG $ ightarrow$ IMG $ ightarrow$ MP4 という構造化された手順に従います。プロセスには、一定の閾値を下回るショットを自動的に再生成する「Vision-Audit」リトライループと、複数のビデオエンジンが最高のクリップを提供するために競い合う「multi-engine race」が含まれています。

対象ユーザー

  • 短尺ドラマクリエイター: トロープ(定番の展開)を意識した執筆や、クリフハンガー(引き)の検出を求めている方。
  • コンテンツマーケティングチーム: 洗練された30秒広告全体を通じて、一貫したキャラクターを必要としている方。
  • インディー映画制作者: マルチトラックのタイムラインとシネマトグラフィー制御を必要としている方。
  • コミック適応スタジオ: スクリプトを一貫したアートスタイルで絵コンテに変換する必要がある方。
  • オープンソース開発者: 独自のLLM(OpenAI, Anthropic, DeepSeek, Ollamaなど)をプラグインしたい方。

ハイライト

  • マルチエージェント・オーケストレーション: Director、Writer、Editorなどの専門的な役割を含む。
  • キャラクターの一貫性: 顔の幾何学的形状とアイデンティティDNAを固定する「Character Studio」による実現。
  • エンドツーエンドのリップシンク: 視覚的な音素(viseme)キーフレームトラックと、口の動きと音声の整合性スコアリングによる実現。
  • ディレクターズ・コントロールルーム: マルチトラックのタイムラインとシネマトグラフィー制御機能を搭載。
  • BYO LLM (Bring-your-own LLM): シンプルな環境変数によるサポート。
  • 自動品質ループ: 低品質なショットの再レンダリングと、作品の健全性を監査するための仕組み。