NomaDamas/CozyClay

何を解決するか

CozyClay はブラウザベースのプレビジ（事前可視化）スタジオで、クリエイターがシーンをブロッキングし、キャラクターのポージング、カメラの動きをタイムライン上で計画できます。3DレイアウトとAI動画生成の間のギャップを埋め、Seedance、Kling、Veo などのAI動画モデルを導くために必要な視覚的基盤（最初のフレーム、リファレンスクリップ、プロンプト）を構造化されたワークスペースで作成します。

動作方法

Three.js と React Three Fiber で構築されたこのスタジオは、プリミティブやセットピースを使ってシーンをステージングできる3D環境を提供します。ショットのカットやカメラ移動のドリー軌道を描くためのタイムラインも備えています。

動きに関しては、Kimodo ブリッジと連携してプロンプトからキャラクターの動きを生成するか、GVHMR を使って動画や写真からモーションをキャプチャします。プロジェクトには MCP（Model Context Protocol）サーバーも搭載されており、Claude などのAIアシスタントが自然言語でシーンを直接操作し、キャラクターを配置し、ショットを構図することができるようになります。

対象ユーザー

AI動画生成モデルにアセットをエクスポートする前に、構図、ブロッキング、動きに対して正確な制御が必要な映画監督、アニメーター、AI動画アーティスト。

特徴

• AI駆動の制御: MCP をサポートし、AIアシスタントによるシーンの直接操作が可能。ChatGPT 用の統合エージェントパネルも搭載。
• AI動画エクスポート: 特定のAI動画モデルに最適化されたキーフレームパック、深度/法線パス、構造化されたプロンプトを生成。
• モーション生成: Kimodo と連携してプロンプトベースのモーションを生成、GVHMR で動画からモーションをキャプチャ。
• ブラウザベースのワークフロー: npx インストールで即座にブラウザタブで完全に機能する。組み込みのカメラチュートリアルも提供。
• ワークフロー・キャンバス: ComfyUI や fal を通じて動画生成を実行できるノードベースエディタで、プロンプトを構築可能。