linyqh/NarratoAI

何を解決するか

NarratoAIは、映画やテレビ番組の解説動画を作成するためのワンストップ自動化ツールです。スクリプト作成、ビデオクリップの編集、ナレーション生成、字幕の追加といった手作業を排除し、クリエイターのコンテンツ制作プロセス全体を効率化します。

仕組み

このツールは、大規模言語モデル（LLM）を活用して、ビデオ制作パイプラインの創造的および技術的な側面を処理します。視覚能力を持つLLM（Qwen2-VLやTwelveLabs Pegasusなど）を使用してビデオの内容を理解し、その理解に基づいてスクリプトを生成し、その後、編集、ナレーション生成（さまざまなTTSエンジン経由）、および字幕の同期を自動化します。

対象者

プロの編集スキルを必要とせずに、高品質な映画/テレビ解説動画を効率的に制作したいコンテンツクリエイターやソーシャルメディアインフルエンサー。

ハイライト

• エンドツーエンドの自動化: スクリプト作成、編集、ナレーション、字幕を一つのワークフローで自動化します。
• ビデオ理解: 深いビデオ分析のために、Qwen2-VLやTwelveLabs Pegasusのような高度なモデルをサポートしています。
• ボイスクローニング: IndexTTSやOmniVoiceを含む複数のTTSエンジンを統合し、ボイスクローニングと感情制御をサポートしています。
• 柔軟なデプロイメント: クラウド版、Dockerコンテナ、またはWindowsおよびmacOS用のローカルインストールパッケージとして利用可能です。
• 統合: 下書きをCapCut (剪映) にエクスポートすることをサポートしています。