Anil-matcha/Open-AI-Micro-Drama-Generator

AI short drama & micro-drama video generator — turns any idea into a complete short-form drama using multi-agent AI pipeline (screenwriter → storyboard → frames → video). Seedance 2 VIP, Kling 3.0 Pro, Veo 3.1, Sora 2.

解决的问题

MicroDrama AI 解决了 AI 视频制作的碎片化问题。传统上,制作短片需要在脚本编写、图像生成和视频创作等不同工具之间来回切换,常常导致叙事结构缺失,以及不同镜头间角色外貌不一致。

工作原理

该项目使用由 MuAPI 驱动的代理型流水线,自动化整个制作流程。它有两种模式:"从想法到视频"(完整流水线)和 "从脚本到视频"(跳过写作阶段)。

  1. 叙事规划:编剧代理开发故事并编写场景脚本,角色提取代理定义角色的视觉特征。
  2. 视觉设计:分镜艺术家代理设计逐帧描述。系统随后生成角色的参考肖像,以确保视觉一致性。
  3. 制作:流水线使用图像到图像(I2I)技术生成每个镜头的第一帧,然后使用图像到视频(I2V)模型将这些帧转换为 5 秒的视频片段。
  4. 合成:所有生成的片段使用 moviepy 合并为最终的 .mp4 文件。

适用人群

专为希望快速原型化电影级微戏剧或创建短格式视频内容,而无需手动管理多个 AI 工具的内容创作者和电影制作人设计。

亮点

  • 端到端自动化:从原始想法到最终渲染视频的全流程处理。
  • 角色一致性:使用参考肖像和特定提取代理,确保角色在不同场景中外观一致。
  • 代理式工作流:协调专门代理(编剧、分镜艺术家、角色提取代理)来承担不同创意角色。
  • 实时监控:配备 SSE 流式传输的 Next.js 前端,可实时展示 7 阶段流水线的进度。

相关

  • 项目
  • 项目
  • 项目
  • 项目
  • 项目