NomaDamas/CozyClay

해결하는 문제

CozyClay은 브라우저 기반의 프리비지(previs, 사전 시각화) 스튜디오로, 창작자가 장면을 블로킹하고 캐릭터를 포즈를 지정하며 타임라인에서 카메라 움직임을 계획할 수 있습니다. 3D 레이아웃과 AI 비디오 생성 사이의 격차를 메우기 위해, Seedance, Kling, Veo와 같은 AI 비디오 모델을 안내하기 위해 필요한 시각적 기반(첫 프레임, 리퍼런스 클립, 프롬프트)을 구조화된 작업 공간에서 생성합니다.

작동 방식

Three.js와 React Three Fiber로 구축된 이 스튜디오는 사용자가 기본 도형과 세트 피스를 사용해 장면을 구성할 수 있는 3D 환경을 제공합니다. 촬영 장면을 자르고 카메라 이동을 위한 도리 레일을 그리는 타임라인도 포함되어 있습니다.

모션에 대해서는 Kimodo 브리지와 통합되어 프롬프트로부터 캐릭터 움직임을 생성하거나, GVHMR를 사용해 동영상/사진에서 모션을 캡처합니다. 이 프로젝트는 MCP(Model Context Protocol) 서버도 포함하고 있어, Claude와 같은 AI 어시스턴트가 자연어로 장면을 직접 조작하고 캐릭터를 배치하며 촬영 구도를 설정할 수 있습니다.

대상 사용자

AI 비디오 생성 모델로 자산을 내보내기 전에 구성, 블로킹, 움직임에 대해 정밀한 제어가 필요한 영화 감독, 애니메이터, AI 비디오 아티스트.

주요 기능

• AI 기반 제어: MCP를 지원하여 AI 어시스턴트가 장면을 직접 조작할 수 있으며, ChatGPT용 통합 에이전트 패널도 제공합니다.
• AI 비디오 내보내기: 특정 AI 비디오 모델에 최적화된 키프레임 팩, 깊이/노멀 패스, 구조화된 프롬프트를 생성합니다.
• 모션 생성: Kimodo와 통합하여 프롬프트 기반 모션 생성 및 GVHMR를 통해 동영상에서 모션 캡처를 지원합니다.
• 브라우저 기반 워크플로우: npx 설치로 브라우저 탭에서 완전히 기능하며, 내장된 카메라 튜토리얼도 제공합니다.
• 워크플로우 캔버스: ComfyUI 또는 fal을 통해 비디오 생성을 실행할 수 있는 노드 기반 에디터로 프롬프트를 구축할 수 있습니다.