jianjieyiban/JJYB_AI_VideoAutoCut

解决的问题

JJYB AI VideoAutoCut 是一款本地优先的 AI 视频创作工作站，旨在消除视频制作过程中在多个工具之间切换的摩擦。它简化了从原始素材分析、剧本编写到配音生成、音画同步以及最终导出的整个工作流程。

工作原理

该项目将多个 AI 驱动的引擎和工具集成到一个桌面应用程序（Flask + PyWebView）中：

• 原创解说工作流：使用 SmartShotSegmenter（通过 TransNetV2 或 OpenCV）进行场景检测，使用 LLM/VLM 进行各种风格的剧本生成，并使用 PuppetSyncEngine 在不使用伪冻结帧的情况下将视频剪辑与生成的音频对齐。
• 智能混音：提供基于剪辑评分的通用模式，以及使用 librosa 根据 BGM 节奏同步剪辑的音乐节拍模式。
• AI 配音与克隆：支持多种 TTS 引擎（Edge TTS、Azure 等）以及通过 IndexTTS2 工作者实现的本地语音克隆。
• AI 封面生成：连接各种图像生成 API（DALL-E 3 等）来创建视频缩略图。
• 集成：通过 FFmpeg 进行渲染，并允许一键导出为 CapCut（剪映）原生草稿格式，以便进行进一步的人工润色。

适用人群

想要自动化视频编辑过程中枯燥部分（如场景拆分、剧本编写和音画同步），同时保持对本地数据控制权的视频创作者和内容制作人。

亮点

• 端到端工作流：在一个工具中涵盖从素材分析到最终导出的所有环节。
• 类人同步：一个专门的引擎，根据实际时间轴而非简单的填充来匹配剪辑与音频。
• CapCut 集成：导出包括视频、音频、BGM 和字幕轨道在内的原生草稿。
• 丰富的风格预设：包含 12 种叙事风格和写作人格，以定制 AI 生成剧本的语调。
• 本地优先方法：优先使用 SQLite 和本地 AI 工作者进行本地处理和存储，以确保隐私和速度。