Anning01/novelvids

从故事创作、角色资产管理、分镜设计,到 AI 图片与视频生成,打造完整的开源 AI 漫剧与短剧创作工作台。支持创作助手、无限画布、本地部署与多模型接入。

해결하는 문제

소설에서 단편 드라마 비디오를 수동으로 제작하는 것은 느리고 노동 집약적입니다. 챕터를 나누고, 캐릭터와 장면을 설계하고, 샷별 프롬프트를 작성하고, 이미지와 비디오를 생성한 다음, 모든 것을 완성된 에피소드로 이어 붙여야 합니다. 이 프로젝트는 거의 전체 파이프라인을 자동화하여 텍스트 소설(또는 기존 비디오)에서 일관된 캐릭터, 음성, 스토리보드를 갖춘 제작 가능한 단편 드라마로 전환할 수 있게 합니다.

작동 방식

시스템은 소설 원고(텍스트 붙여넣기 또는 doc/docx/txt/pdf 업로드)를 받아 챕터 분할, 엔터티 추출(캐릭터, 장면, 소품), 자산 생성(참조 이미지, 음성 클립), 스토리보드 생성, 멀티모달 비디오 합성, 최종 에피소드 병합과 같은 일련의 자동 단계를 실행합니다. 또한 기존 비디오(mp4/mov, 최대 500MB 및 20분)를 "리메이크 워크숍"에 업로드할 수 있으며, 시스템은 전역 역할과 장면을 감지하고 비디오를 샷으로 분할한 다음 전문적인 스토리보드 프롬프트를 다시 생성합니다.

자동 에이전트 모드와 수동 편집 모드가 모두 제공됩니다. 에이전트(Pydantic AI 기반)는 "이 챕터에 비 오는 밤 역 장면을 추가해" 또는 "이 샷을 따뜻한 톤으로 만들되 동작과 대화는 유지해"와 같은 자연어 요청에 응답하며, 감사 가능한 변경 기록과 실행 취소 지원을 반환합니다. 플랫폼에는 스토리보드 편집기, 시각적 워크플로우를 위한 무한 캔버스(Vue Flow), 캐릭터 음성 일관성을 위한 음성 라이브러리, 구성 가능한 비디오 모델 어댑터(Seedance, MiniMax H3, Wan3), 사용량 및 비용 추적이 포함된 청구 대시보드도 포함되어 있습니다.

대상 사용자

콘텐츠 제작자, 단편 드라마 제작 팀, 취미로 만드는 사람, 그리고 책이나 참조 비디오를 연재 단편 드라마로 변환하는 엔드투엔드 AI 지원 파이프라인을 원하는 개발자를 위한 것입니다. 데모가 아닌 프로덕션 등급의 배포 가능한 애플리케이션(Docker 권장)으로 설계되었으며, 팀 기능(선택 사항), 역할 기반 액세스 제어, AI 프롬프트 및 생성 규칙에 대한 광범위한 사용자 지정 후크를 포함합니다.

하이라이트

  • 소설에서 완성된 단편 드라마까지 원클릭 파이프라인: 챕터 분할, 엔터티 추출, 자산 생성, 스토리보드, 비디오 합성, 에피소드 병합.
  • 실제 비즈니스 도구, 장기/단기 메모리, 되돌릴 수 있는 작업 영수증을 갖춘 자연어 기반 에이전트 지원 제작.
  • 리메이크 워크숍: 비디오 또는 에피소드 폴더를 업로드하고, 장면과 샷을 자동 감지하고, 비동기 진행 추적과 함께 새로운 스토리보드 프롬프트를 생성합니다.
  • 일관된 자산: 캐릭터 외모, 의상, 노화 상태, 음성 참조를 자산별로 버전 기록과 함께 관리합니다.
  • 두 가지 내장 전략(영화적 내러티브 및 나레이션)과 완전히 편집 가능하고 자산 태그가 지정된 프롬프트를 갖춘 스토리보드 엔진.
  • 스토리보드 워크플로우를 위한 무한 캔버스(Vue Flow): 팬, 줌, 복사/붙여넣기, 실행 취소/다시 실행, 뷰포트 지속성 지원.
  • Seedance, MiniMax H3, Wan3을 지원하는 구성 기반 비디오 팩토리. 첫/마지막 프레임 연속성과 FFmpeg 기반 폴백 포함.
  • 모델에 구애받지 않는 비용 청구: 토큰/이미지/비디오 사용량, 가격 스냅샷, 할인, 프로젝트별 대시보드.
  • 모든 생성 단계에 대해 완전히 사용자 지정 가능한 프롬프트 템플릿(중국어 및 영어). 코드를 건드릴 필요 없음.
  • 프로덕션 준비 완료: Docker compose, SQLite/PostgreSQL, 로컬 미디어 또는 Aliyun OSS, 선택적 팀 인증 스위치.

관련

  • 프로젝트
  • 프로젝트
  • 프로젝트
  • 프로젝트