diffusionstudio/editor

何を解決するか

Diffusion Studio は、AIエージェントによって操作可能なプロフェッショナルなビデオエディタです。手動のビジュアル編集とプログラム制御のギャップを埋め、エージェントがGUIではなくコードやコマンドラインインターフェースを通じて、ビデオコンテンツの作成、カット、精緻化を行うことを可能にします。

動作方法

エディタはビデオプロジェクトをコードとして扱い、SolidJSモジュール（JSX）をドキュメントソースとして使用します。これにより、双方向のリンクが構築されます：ビジュアルキャンバス上で行われた変更はコードに反映され、コードの変更は即座にキャンバスに反映されます。

AIエージェントがエディタを操作できるようにするため、dapi と呼ばれるCLIツールを提供しています。このCLIは、フレーム取得、波形生成、音声認識、マルチモーダルモデルクエリなどのツールを通じて、エージェントがメディアを「見る」・「聞く」ことを可能にし、その理解に基づいてタイムライン上の編集を実行できます。

対象ユーザー

• AI開発者：Claude Code、Cursor、Gemini CLIなどのツールを使って、ビデオ制作を自動化するエージェントを開発する人。
• コンテンツクリエイター：生成AIアセット（画像、動画、ナレーション）を従来のビデオ編集と組み合わせたい人。
• モーショングラフィックスデザイナー：コードファーストのアプローチで解説動画やプロモーション動画を作成する人。

特徴

• 双方向編集：JSXベースのコードエディタとビジュアルビデオキャンバス間の同期更新。
• エージェント対応CLI：AIエージェント向けの、メディア調査、音声認識、シーンキャプチャを網羅する dapi コマンド群。
• コードによるコンポジション：ビデオ要素、タイミング、生成アセットはJSXで宣言され、バージョン管理可能でスクリプトで編集可能。
• マルチモーダル統合：コード経由でタイムライン内に直接画像、動画、ナレーションを生成する内蔵機能。