0xsline/StoryGen-Atelier

AI-assisted storyboard and video generation tool. Uses Gemini for generating storyboard text and frames, Vertex AI Veo for generating transition clips, and ffmpeg for stitching the final video. Built-in logs and gallery management.

解決的問題

StoryGen Atelier 自動化了將故事構想轉變為完整影片的複雜過程。它消除了編寫腳本、生成一致的分鏡畫面,以及在畫面之間創建平滑過渡以產生連貫電影序列的手動工作。

運作方式

該工具使用三階段自動化流程:

  1. 過渡分析:使用 Gemini 分析分鏡圖像對(鏡頭 A 和鏡頭 B),並生成特定的「過渡提示詞」和持續時間,以描述如何從一個畫面過渡到另一個畫面。
  2. 片段生成:使用第一步的提示詞,呼叫 Vertex AI Veo(或 MiniMax)來生成連接開始和結束畫面的影片片段。
  3. 最終組裝:使用 FFmpeg 將這些單獨的片段拼接成一個單一的、無損的 MP4 影片檔案。

目標對象

想要快速製作影片原型或從文字描述創建 AI 生成電影故事的內容創作者、電影製作人和說故事的人。

特色亮點

  • 端到端工作流程:處理從腳本和畫面生成到最終影片拼接的所有事務。
  • 插值鏈策略:使用滑動視窗方法確保鏡頭之間的視覺連續性。
  • 多模型支援:整合 Google Gemini 和 Vertex AI Veo,並可選支援 MiniMax 模型。
  • 管理工具:包含用於儲存/載入專案的內建圖庫,以及用於追蹤生成歷史的日誌儀表板。

相關

  • 專案
  • 專案
  • 專案
  • 專案