Agions/splicr

何を解決するか

splicr は AI による動画ナレーションや解説の作成を簡素化します。短編ドラマ、映画の要約、SNS向けの物語コンテンツを作成するクリエイターを対象に、映像のカット、スクリプト作成、音声同期といった面倒なプロセスを自動化します。

動作方法

アプリケーションは、7段階のインテリジェントパイプラインを使用して、未加工の映像を完成した動画に変換します。

1. インポート: ローカルファイルからメタデータを抽出し、サムネイルを生成します。
2. スマートカット: FFmpeg を使用してシーン検出とキーフレームインデックスを実行します。
3. AIスクリプト生成: 11 のサポート対象 LLM のいずれかを使用して、第一人称の独白やレビューを生成します。
4. TTS とボイスクラウンニング: Edge-TTS、OpenAI-TTS、または GPT-SoVITS を使用してスクリプトを音声に変換し、ボイスクラウンニングを実現します。
5. 字幕同期: FFmpeg による VAD（音声活動検出）を活用して、字幕を正確に同期します。
6. ミキシング: ミリ秒単位の精度で音声と映像トラックを同期し、バックグラウンド音楽のレベルを管理します。
7. エクスポート: 最終的な 1080P 縦型動画または、さらに編集可能な CapCut ドラフトファイル（.draft）を出力します。

対象ユーザー

セルフメディアクリエイター、短編ドラマ編集者、映画解説者など、生産プロセスを高速化しつつ視聴者のエンゲージメントを維持したい方々に最適です。

特徴

• 広範な LLM 対応: Qwen、DeepSeek、GPT、Claude、Gemini など 11 のプロバイダーをサポート。Ollama/LMStudio を通じたローカルモデルも利用可能。
• ボイスクラウンニング: GPT-SoVITS を使用したゼロショットボイスクラウンニングをサポート。
• CapCut 統合: 専門的な後処理のために CapCut ドラフト形式に直接エクスポート可能。
• 高性能スタック: レスポンシブなデスクトップ体験を実現するため、Rust、Tauri 2、React 19 を採用。