jianjieyiban/JJYB_AI_VideoAutoCut

解決的問題

JJYB AI VideoAutoCut 是一款本地優先的 AI 影片創作工作站，旨在消除影片製作過程中在多個工具之間切換的摩擦。它簡化了從原始素材分析、劇本編寫到配音生成、音畫同步以及最終匯出的整個工作流程。

工作原理

該專案將多個 AI 驅動的引擎和工具整合到單一桌面應用程式（Flask + PyWebView）中：

• 原創解說工作流：使用 SmartShotSegmenter（透過 TransNetV2 或 OpenCV）進行場景檢測，使用 LLM/VLM 進行各種風格的劇本生成，並使用 PuppetSyncEngine 在不使用偽凍結幀的情況下將影片剪輯與生成的音訊對齊。
• 智慧混音：提供基於剪輯評分的通用模式，以及使用 librosa 根據 BGM 節奏同步剪輯的音樂節拍模式。
• AI 配音與克隆：支援多種 TTS 引擎（Edge TTS、Azure 等）以及透過 IndexTTS2 工作者實現的本地語音克隆。
• AI 封面生成：連接各種圖像生成 API（DALL-E 3 等）來建立影片縮圖。
• 整合：透過 FFmpeg 進行渲染，並允許一鍵匯出為 CapCut（剪映）原生草稿格式，以便進行進一步的人工潤色。

適用人群

想要自動化影片編輯過程中枯燥部分（如場景拆分、劇本編寫和音畫同步），同時保持對本地數據控制權的影片創作者和內容製作人。

亮點

• 端到端工作流：在一個工具中涵蓋從素材分析到最終匯出的所有環節。
• 類人同步：一個專門的引擎，根據實際時間軸而非簡單的填充來匹配剪輯與音訊。
• CapCut 整合：匯出包括影片、音訊、BGM 和字幕軌道在內的原生草稿。
• 豐富的風格預設：包含 12 種敘事風格和寫作人格，以定制 AI 生成劇本的語調。
• 本地優先方法：優先使用 SQLite 和本地 AI 工作者進行本地處理和儲存，以確保隱私和速度。