Agions/splicr

해결하는 문제

splicr는 AI 기반 동영상 내레이션과 해설 제작을 간소화합니다. 짧은 드라마, 영화 리뷰, 소셜 미디어용 스토리텔링 콘텐츠를 제작하는 크리에이터를 대상으로, 영상 자르기, 스크립트 작성, 오디오 동기화와 같은 번거로운 과정을 자동화합니다.

작동 방식

이 애플리케이션은 7단계 지능형 파이프라인을 사용하여 원시 영상에서 완성된 동영상을 생성합니다.

1. 입력: 로컬 파일에서 메타데이터를 추출하고 썸네일을 생성합니다.
2. 스마트 커팅: FFmpeg를 사용해 장면 탐지 및 키프레임 인덱싱을 수행합니다.
3. AI 스크립팅: 11개의 지원되는 LLM 중 하나를 사용해 1인칭 독백 또는 리뷰를 생성합니다.
4. TTS 및 보이스 클로닝: Edge-TTS, OpenAI-TTS, 또는 GPT-SoVITS를 사용해 스크립트를 음성으로 변환하고 보이스 클로닝을 수행합니다.
5. 자막 정렬: FFmpeg를 통한 VAD(음성 활동 탐지)를 활용해 자막을 정확히 동기화합니다.
6. 믹싱: 밀리초 단위 정밀도로 오디오와 비디오 트랙을 동기화하고 배경 음악 레벨을 관리합니다.
7. 내보내기: 최종 1080P 세로 동영상 또는 추가 편집을 위한 네이티브 CapCut 드래프트 파일 (.draft)을 생성합니다.

대상 사용자

자기 미디어 크리에이터, 짧은 드라마 편집자, 영화 리뷰어 등 생산 프로세스를 가속화하면서도 높은 시청자 유지율을 유지하고 싶은 사용자에게 적합합니다.

주요 기능

• 광범위한 LLM 지원: Qwen, DeepSeek, GPT, Claude, Gemini 및 Ollama/LMStudio를 통한 로컬 모델을 포함한 11개의 제공업체를 통합합니다.
• 보이스 클로닝: GPT-SoVITS를 통해 제로샷 보이스 클로닝을 지원합니다.
• CapCut 통합: 전문적인 후반 작업을 위해 CapCut 드래프트 형식으로 직접 내보낼 수 있습니다.
• 고성능 스택: 반응성 있는 데스크톱 경험을 위해 Rust, Tauri 2, React 19를 사용합니다.