openstory-so/openstory

Open-source AI-powered video sequence platform built with TanStack Start

해결하는 문제

OpenStory는 작성된 스크립트를 스타일화된 비디오 제작으로 변환하는 과정을 자동화합니다. 이미지, 모션 비디오 및 오디오의 AI 생성을 조정하면서 다양한 장면 간의 시각적 일관성을 유지함으로써 프롬프트 엔지니어링 및 합성에 대한 수동 작업을 제거합니다.

작동 방식

이 플랫폼은 스크립트를 처리하기 위해 AI 모델 파이프라인을 사용합니다:

  1. 스크립트 분석: 스크립트를 장면으로 분해하고 카메라 앵글, 분위기 및 연속성 요구 사항을 식별합니다.
  2. 생성: 이미지 및 비디오 생성에는 Fal.ai를 사용하고 LLM 기반 스크립트 분석에는 OpenRouter를 사용합니다.
  3. 일관성 관리: 제작 전반에 걸쳐 캐릭터, 로케이션 및 색상 팔레트가 일관성을 유지하도록 보장합니다.
  4. 엣지 인프라: 전체 애플리케이션이 Cloudflare Workers에 배포되며, 데이터베이스에는 D1, 스토리지에는 R2, 생성 작업의 지속적인 실행에는 Cloudflare Workflows를 활용합니다.

대상

모든 프레임에 대해 복잡한 AI 프롬프트를 수동으로 관리할 필요 없이 스크립트에서 AI 생성 비디오를 빠르게 프로토타입하거나 제작하려는 콘텐츠 제작자 및 제작 팀을 위한 플랫폼입니다.

하이라이트

  • 자동 장면 분해: 텍스트 스크립트에서 카메라 앵글과 분위기 처리를 자동으로 추출합니다.
  • 스타일 연속성: 여러 장면에 걸쳐 캐릭터와 로케이션의 일관된 시각적 정체성을 유지합니다.
  • 이미지-투-비디오: 정지된 AI 생성 프레임을 모션 비디오 클립으로 변환합니다.
  • 엣지 네이티브 스택: 글로벌 배포와 낮은 지연 시간을 위해 Bun 및 Cloudflare Workers로 구축되었습니다.

관련

  • 프로젝트
  • 프로젝트
  • 프로젝트
  • 프로젝트
  • 프로젝트