huytranvan2010/AI-auto-generate-video
Auto generate AI video with hyperframes
解決的問題
本專案自動化將文字文章轉換為 9:16 的短影片(TikTok、Shorts、Reels)。透過使用決定性流程,將腳本轉換為帶有旁白與音效的精緻影片,從而無需手動影片編輯。
工作原理
內容創作分為兩個部分:AI 負責腳本與模板選擇,而決定性程式碼負責實際渲染。
- 腳本生成:使用 Claude Code(或手動)建立
script.json,其中包含每個場景的旁白文字與特定模板 ID。 - 音訊生成:管道使用 OmniVoice(本地 TTS 引擎)為每個場景生成旁白,並根據關鍵字或場景類型混合音效(SFX)。
- 視覺渲染:HyperFrames 使用 Chromium 將基於 HTML 的模板渲染為 MP4 片段。
- 合成:FFmpeg 將片段串接起來,並複用最終音訊軌道,生成 1080x1920 影片。
適用對象
希望無需手動編輯即可快速將越南語文章轉換為短影片的內容創作者,以及對自動化影片製作流程感興趣的開發者。
特色
- 決定性渲染:相同的腳本總是產生相同的影片,便於迭代。
- 程式碼化模板:視覺內容以自包含的 HyperFrames 專案形式管理,可透過 HTML/CSS 輕鬆自訂。
- 自動音效:音效根據腳本文字的語意匹配自動選擇。
- 本地 TTS:整合 OmniVoice 實現本地越南語文字轉語音,無需外部 API 金鑰。
相關
- 專案
- 專案
- 專案
- 專案