0xsline/StoryGen-Atelier
AI-assisted storyboard and video generation tool. Uses Gemini for generating storyboard text and frames, Vertex AI Veo for generating transition clips, and ffmpeg for stitching the final video. Built-in logs and gallery management.
解决的问题
StoryGen Atelier 自动化了将故事构想转变为完整视频的复杂过程。它消除了编写脚本、生成一致的分镜画面,以及在画面之间创建平滑过渡以产生连贯电影序列的手动工作。
运作方式
该工具使用三阶段自动化流程:
- 过渡分析:使用 Gemini 分析分镜图像对(镜头 A 和镜头 B),并生成特定的“过渡提示词”和持续时间,以描述如何从一个画面过渡到另一个画面。
- 片段生成:使用第一步的提示词,调用 Vertex AI Veo(或 MiniMax)来生成连接开始和结束画面的视频片段。
- 最终组装:使用 FFmpeg 将这些单独的片段拼接成一个单一的、无损的 MP4 视频文件。
目标对象
想要快速制作视频原型或从文字描述创建 AI 生成电影故事的内容创作者、电影制作人和讲故事的人。
特色亮点
- 端到端工作流程:处理从脚本和画面生成到最终视频拼接的所有事务。
- 插值链策略:使用滑动窗口方法确保镜头之间的视觉连续性。
- 多模型支持:整合 Google Gemini 和 Vertex AI Veo,并可选支持 MiniMax 模型。
- 管理工具:包含用于保存/加载项目的内置图库,以及用于追踪生成历史的日志仪表板。
相关
- 项目
- 项目
- 项目
- 项目