MartinDelophy/ai-video-editor

해결하는 문제

Timeline Studio는 AI 기능을 다중 트랙 타임라인에 직접 통합한 로컬 우선의 브라우저 기반 동영상 편집 도구입니다. AI 처리를 위해 프로젝트 미디어를 백엔드에 업로드할 필요가 없으며, 프라이버시를 보장하고 지연을 줄이며 프로페셔널 수준의 편집 도구를 제공합니다.

작동 방식

에디터는 WebGPU와 WASM을 사용하여 브라우저 내에서 로컬 추론을 수행합니다. 음악 생성 및 음성 인식과 같은 작업에는 ONNX 모델을 활용하고, MP4/WebM 조합에는 WebCodecs를 사용합니다. 모델은 지연 로딩되며 서비스 워커를 통해 캐시되며, Hugging Face와 ModelScope에 미러가 있어 가용성을 보장합니다. 또한 .timeline 프로젝트 파일에서 AI 에이전트가 편집 계획을 세우고 실행할 수 있는 헤드리스 명령 실행기도 포함되어 있습니다.

대상 사용자

CapCut 스타일의 편집 경험을 원하고, 로컬 브라우저에서 실행되는 통합 AI 도구(예: 대화하는 아바타, 자동 자막 등)를 원하는 콘텐츠 크리에이터 및 개발자에게 적합합니다.

주요 기능

• 로컬 AI 세트: 다국어 음성 합성, 음악 생성을 위한 Stable Audio 3, 자동 자막 생성을 위한 Whisper, 워터마크 제거를 위한 MI-GAN 포함.
• 시각 AI 도구: 스마트 프레임을 위한 YOLOS, 배경 제거를 위한 MODNet, 디지털 인간 애니메이션을 위한 LivePortrait.
• 프로페셔널 타임라인: 다중 트랙 편집, 키프레임, 4방향 컬러 그레이딩, 리플 편집 지원.
• 에이전트 대응: LLM 에이전트가 프로그래밍 방식으로 동영상 프로젝트를 검사하고 수정할 수 있는 전용 "AI 동영상 편집 기술" 제공.
• 프라이버시 중심: 로컬 우선 추론으로 AI 워크플로우 중에도 미디어가 사용자 기기 내에 머무릅니다.