daydreamlive/scope

A tool for running and customizing real-time, interactive generative AI pipelines and models

해결하는 문제

Scope는 실시간으로 생성형 AI 비디오 파이프라인을 실행하고 사용자 정의하며 상호작용할 수 있는 방법을 제공합니다. 낮은 지연 시간의 비디오 생성을 관리하는 어려움과, 다양한 모델과 처리 기법을 조합할 수 있는 구성 가능한 시스템의 필요성을 해결합니다.

작동 방식

자기회귀형 비디오 확산 모델(예: StreamDiffusionV2 및 LongLive)과 구성 가능한 VAE를 지원하는 구성 가능한 파이프라인 아키텍처를 사용합니다. 시스템은 비디오 확산과 프레임 보간, 깊이 맵핑과 같은 다른 기술을 결합할 수 있도록 합니다. 타임라인 편집기와 함께 제공되는 인터랙티브 UI를 갖추고 있으며, WebRTC, NDI, Spout, Syphon을 통해 네트워크 또는 로컬 애플리케이션 간에 비디오를 실시간 스트리밍 공유할 수 있습니다.

대상 사용자

실시간으로 상호작용 가능한 생성형 비디오 기능이 필요한 크리에이터 및 개발자, 그리고 플러그인과 LoRA를 사용해 맞춤형 AI 비디오 파이프라인을 구축하고자 하는 사람들을 위한 도구입니다.

주요 특징

  • 실시간 파이프라인: 낮은 지연 시간의 비동기 비디오 처리와 WebRTC 스트리밍을 지원합니다.
  • 구성 가능한 아키텍처: 비디오 확산과 깊이 맵핑, 프레임 보간을 혼합할 수 있습니다.
  • 확장성: 새로운 모델과 시각 효과용 플러그인, 스타일 커스터마이징용 LoRA를 지원합니다.
  • 광범위한 통합: NDI, Spout, Syphon과의 통합을 통해 원활한 비디오 공유를 가능하게 합니다.
  • 인터랙티브 제어: 타임라인 편집기, 텍스트 프롬프트, 파라미터 제어를 포함한 UI를 제공합니다.

관련

  • 프로젝트
    myccarl/ai-shortVideo-pipeline

    myAiVideos는 Docker Compose 기반의 오픈소스 시스템으로, 중국어 콘텐츠를 위한 단편 영상 제작 워크플로우(주제 → 스크립트 → 비주얼 → 오디오 → 편집 → 배포)를 완전 자동화합니다. FastAPI 오케스트레이터와 Java Spring-Boot 게이트웨이(인증, 라우팅, 회로 차단, 메터링)를 사용하며, DeepSeek, GLM, Kling, TTS 서비스 등 다양한 LLM 및 멀티모달 모델과 통합됩니다. 파이프라인은 계층적이고 장애 대체 가능하며, Langfuse와 Prometheus를 통해 완전한 관측성이 보장됩니다.

  • 프로젝트
    SamurAIGPT/Vibe-Workflow

    Vibe Workflow는 생성형 이미지 및 비디오 파이프라인을 구축하기 위한 오픈소스이며 MIT 라이선스를 따르는 노드 기반 시각 에디터입니다. Next.js 프론트엔드, MuAPI의 생성 모델을 호출하는 FastAPI 백엔드, 재사용 가능한 워크플로우 빌더 UI 라이브러리로 구성되어 있습니다. Docker 또는 수동 설치로 자체 호스팅이 가능하며, 호스팅된 SaaS 버전도 이용할 수 있으며, 사용자 정의 노드를 통해 어떤 AI 모델이나 외부 API도 호출할 수 있습니다.

  • 프로젝트
    Comfy-Org/ComfyUI

    시각 전문가가 모든 매개변수를 정밀하게 제어하면서 이미지, 비디오, 오디오, 3D 모델을 생성할 수 있는 모듈식 노드 기반 AI 엔진입니다.

  • 프로젝트
    zenstory-ai/video-recap-skills

    Video Recap Skills는 AI 에이전트용 플러그인 스위트로, 모든 비디오를 짧은 중국어 내레이션 요약으로 자동 변환합니다. 음성 인식, 시각 언어 분석, 텍스트 음성 변환에 Xiaomi MiMo를 사용하며, 로컬에서는 ffmpeg만 필요합니다. 에이전트는 스토리 계획을 만들고, 클립을 선택하고, 내레이션을 작성하고, TTS를 생성하고, 모든 것을 믹스하여 MP4와 자막을 출력합니다. 또한 수동 편집을 위해 멀티트랙 Jianying/CapCut 드래프트를 내보낼 수 있습니다. 설치는 몇 가지 brew/apt 명령, MiMo API 키 설정, Claude Code, Codex CLI, OpenCode 또는 OpenClaw에 플러그인 추가로 완료됩니다. 저장소는 MIT 라이선스이며 ZenStory AI 오픈소스 생태계의 일부입니다.

  • 프로젝트
    crisng95/flowkit

    Google Flow를 통해 AI 비디오 제작을 자동화하는 독립형 시스템으로, Chrome 확장 프로그램 브리지를 사용하여 인증을 처리하고 장면 간 시각적 일관성을 유지하는 파이프라인을 갖추고 있습니다.