ChrisChen667788/wind-comic

Multi-agent AI pipeline that turns one line of text into a finished short-form drama: script, cinematic storyboards, character-consistent video. Provider-agnostic (OpenAI/Claude, MJ, Minimax, Veo/Sora, fal, ComfyUI). MIT.

Wind Comic – AI 기반 단편 드라마 스튜디오

한 줄의 텍스트 → 완전한 단편 영화 (대본, 스토리보드, 음성 해설, 립싱크, 음악, 최종 .mp4). Wind Comic은 멀티 에이전트, 웹 기반 제작 파이프라인으로, 전문 AI 모델(LLM, 이미지 확산, 비디오 엔진, TTS, 립싱크)을 단일 협업 인터페이스 아래 통합합니다.

기능

  • 입력: 한 문장(또는 짧은 프롬프트).
  • 출력: 완성된 단편 드라마 – 전체 대본, 캐릭터 바이블, 멀티 샷 스토리보드, 캐릭터별 음성 해설, 동기화된 입술 애니메이션, 배경 음악, 자막 및 MP4 비디오.
  • 워크플로우: 자율 에이전트 체인 – 작가, 감독, 프로듀서, 캐릭터 디자이너, 스토리보드 아티스트, 비디오 엔진, TTS, 립싱크, 편집자 – 각 에이전트는 엄격한 계약을 받고 다음 단계로 산출물을 전달합니다. 시스템은 모든 중간 산출물(JSON, PNG, MP4)을 이중 드라이버 데이터베이스(SQLite ↔ PostgreSQL)에 저장하므로 전체 영화를 재생성하지 않고도 모든 단계를 다시 실행할 수 있습니다.
  • 실시간 협업: CRDT 기반 타임라인(Yjs)을 통해 여러 사용자가 프로젝트를 동시에 편집할 수 있습니다. 비디오용 Figma와 유사합니다.
  • 자체 LLM 사용: 세 가지 환경 변수를 설정하여 기본 LLM(DeepSeek → MiniMax)을 교체할 수 있습니다. 코드 변경이 필요 없습니다.
  • 플러그인 미디어 엔진: 12개 이상의 이미지/비디오 생성기(Midjourney, Seedream, Kling, Veo, HappyHorse 등)가 구성 가능한 우선순위 목록을 통해 라우팅됩니다. 만족스러운 클립을 먼저 반환하는 엔진이 "엔진 레이스"에서 승리합니다.
  • 비용 가드 및 예산: 단계별 비용 귀속(LLM, 이미지, 비디오, TTS, 립싱크)과 예산 임계값, 4차원 게시 게이트(시각적 대본 일관성, 립싱크 품질, 자막, 예산).
  • 템플릿 마켓: 완성된 프로젝트는 재사용 가능한 템플릿(스타일, 페이스, 음성)으로 저장하고 한 번의 클릭으로 리믹스할 수 있습니다.

주요 기술 하이라이트

  • 프론트엔드: Next.js 16 (React) 및 WebGL 기반 감독 콘솔(카메라 배치, 3D 미리보기, 틸트/에임 컨트롤).
  • 백엔드 오케스트레이션: Node 20 서버가 8개의 에이전트를 오케스트레이션하고, CRDT 동기화를 처리하며, LLM 게이트웨이 및 미디어 엔진 라우터와 통신합니다.
  • 데이터 계층: 로컬 개발에는 SQLite, 프로덕션에는 PostgreSQL; 모든 산출물은 영구 저장되고 버전 관리됩니다.
  • 품질 루프: 비전 감사 재시도(점수 < 70인 샷 자동 재생성), 멀티 엔진 레이스, ffprobe 기반 상태 보고서, viseme-오디오 정렬 점수로 자동 립싱크 드리프트 보정.
  • 테스트: 6608개의 자동화 테스트가 CI에서 통과하여 전체 파이프라인을 커버합니다.
  • 국제화: UI 및 생성된 스크립트는 영어와 중국어를 지원합니다. 자막은 프로젝트 언어별로 자동 생성됩니다.

사용 대상

  • 콘텐츠 제작자: 전체 제작 팀을 고용하지 않고 짧은 내러티브 비디오를 제작하려는 분.
  • 게임 또는 비주얼 노벨 스튜디오: 소설이나 대본에서 컷신을 빠르게 프로토타입하려는 분.
  • 교육자 및 마케터: 빠르고 스타일화된 비디오 설명 또는 광고가 필요한 분.
  • 팀: 협업 스토리보드 및 비디오 자산 버전 관리가 필요한 팀.

성숙도 및 가용성

  • 프로젝트 버전은 v13.4(2026년 10월 출시)이며, 전체 변경 로그, CI 파이프라인, 공개 데모 비디오가 있습니다.
  • MIT 라이선스이며, 중국 본토 사용자를 위한 AtomGit 미러가 있습니다.
  • 문서에는 피치 덱, LLM 제공자 가이드, 로드맵이 포함됩니다.

결론: Wind Comic은 한 줄의 텍스트를 완전한 단편 영화로 변환하는 프로덕션급 멀티 에이전트 AI 스튜디오로, 실시간 협업, 비용 가시성, 플러그인 LLM 및 미디어 엔진을 통한 확장성을 제공합니다.

관련

  • 프로젝트
  • 프로젝트
  • 프로젝트
  • 프로젝트
  • 프로젝트