vox-director: 단일 주제로부터 편집 스타일의 종이 콜라주 설명 영상을 제작하는 자동화 파이프라인
해결하는 문제
Vox Director는 고품질의 편집 스타일 "종이 콜라주" 설명 또는 광고 영상을 제작하는 과정을 자동화합니다. 스크립트 작성, 키프레임 디자인, 애니메이션 제작, 오디오 추가와 같은 수동 작업을 제거하여 사용자가 단일 주제만으로 완성된 영상 파일을 만들 수 있게 합니다.
작동 방식
이 프로젝트는 코딩 에이전트(Claude Code 또는 Codex와 같은) 및 Atlas Cloud API와 통합되는 에이전트 기술(agent skill)로 작동합니다. beats.json 파일에 의해 구동되는 구조화된 파이프라인을 따릅니다:
- Beat Mapping: 서사적 흐름과 사용자의 승인을 위한 일련의 비트(beats)를 생성합니다.
- Style Bake-off: 사용자가 시각적 스타일을 선택할 수 있도록 몇 가지 테마 옵션을 렌더링합니다.
- Keyframe Generation: 텍스트-이미지 모델을 사용하여 각 비트에 대한 풍부한 콜라주 포스터를 생성합니다.
- Motion: 이미지-비디오 모델을 사용하거나 정밀한 조각별 조립을 위해 로컬 키프레임 엔진을 사용하여 포스터를 애니메이션화합니다.
- Audio: TTS를 통해 내레이션을 생성하고 배경 음악을 추가합니다.
- Assembly:
ffmpeg를 사용하여 모든 요소를 결합하고, 음성 녹음 시 음악 볼륨을 낮추며(ducking), 자막을 입힙니다.
세 가지 입력 모드를 지원합니다: B-roll (주제-to-영상), A-roll (기존의 토킹헤드 영상을 재스타일링), 그리고 C-roll (단일 정지 사진을 콜라주 환경에 고정).
대상 사용자
수동 영상 편집 소프트웨어를 사용하지 않고도 전문적인 느낌의 빠른 템포 교육 또는 홍보 영상을 제작하고 싶은 콘텐츠 크리에이터, 마케터, 그리고 코딩 에이전트 사용자.
주요 특징
- End-to-end 자동화: 스크립트부터 최종
.mp4까지 모든 과정을 처리합니다. - Multi-modal 입력: 텍스트 주제, 기존 영상, 또는 단일 이미지에서 시작하는 것을 지원합니다.
- Human-in-the-loop: 서사 구조와 시각적 스타일을 승인하기 위한 결정 단계가 포함되어 있습니다.
- Integrated AI Stack: Atlas Cloud를 통해 이미지 생성, 영상 애니메이션, 음성 복제, 음악 생성에 특화된 다양한 모델을 활용합니다.