daydreamlive/scope
A tool for running and customizing real-time, interactive generative AI pipelines and models
解决的问题
Scope 提供了一种实时运行、自定义和交互式使用生成式 AI 视频流水线的方法。它解决了低延迟视频生成的管理难题,以及需要一个可组合系统以组合不同模型和处理技术的需求。
工作原理
采用可组合的流水线架构,支持自回归视频扩散模型(如 StreamDiffusionV2 和 LongLive)和可配置的 VAE。该系统允许用户将视频扩散与其他技术(如帧插值和深度映射)结合使用。它配备交互式 UI,包含时间线编辑器,并支持通过 WebRTC、NDI、Spout 和 Syphon 实现实时流媒体,以便在不同网络或本地应用程序之间共享视频。
适用人群
专为需要实时、交互式生成视频功能的创作者和开发者设计,也适用于希望使用插件和 LoRAs 构建自定义 AI 视频流水线的用户。
主要亮点
- 实时流水线:支持低延迟异步视频处理和 WebRTC 流媒体。
- 可组合架构:支持将视频扩散与深度映射和帧插值结合使用。
- 可扩展性:支持新模型和视觉效果的插件,以及用于风格定制的 LoRAs。
- 广泛集成:与 NDI、Spout 和 Syphon 集成,实现无缝视频共享。
- 交互式控制:包含时间线编辑器、文本提示和参数控制的 UI。
相关
- 项目
myccarl/ai-shortVideo-pipelinemyAiVideos 是一个基于 Docker Compose 的开源系统,可自动化中文内容的短视频创作全流程(主题 → 脚本 → 视觉 → 音频 → 后期 → 分发)。它采用 FastAPI 编排器 + Java Spring-Boot 网关(负责认证、路由、熔断与计量),并集成多个 LLM 与多模态模型(DeepSeek、GLM、Kling、TTS 服务)。该流水线分层设计、具备故障转移能力,且通过 Langfuse 和 Prometheus 实现全链路可观测性。
- 项目
SamurAIGPT/Vibe-WorkflowVibe Workflow 是一个开源、MIT 许可证的节点式可视化编辑器,用于构建生成式图像和视频流水线。它由 Next.js 前端、调用 MuAPI 生成模型的 FastAPI 后端以及可复用的工作流构建 UI 库组成。你可以通过 Docker 或手动方式自托管,也可使用托管的 SaaS 版本,并可通过自定义节点调用任何 AI 模型或外部 API。
- 项目
- 项目
zenstory-ai/video-recap-skillsVideo Recap Skills 是一个面向 AI 代理的插件套件,可自动将任何视频转换为带中文解说的短视频回顾。它使用小米 MiMo 进行语音转文字、视觉语言分析和文字转语音,本地仅需 ffmpeg。代理会制定故事计划、选择片段、撰写解说、生成 TTS、混合所有内容,并输出 MP4 和字幕。它还可以导出多轨剪映/CapCut 草稿,以便进一步手动编辑。安装只需几条 brew/apt 命令、设置 MiMo API 密钥,并将插件添加到 Claude Code、Codex CLI、OpenCode 或 OpenClaw。该仓库采用 MIT 许可证,是 ZenStory AI 开源生态系统的一部分。
- 项目
crisng95/flowkit一个独立的系统,通过 Google Flow 自动化 AI 视频制作,使用 Chrome 扩展桥接来处理认证,并建立一个管道以维持跨场景的视觉一致性。