xcLee001/SonicVale

一个开源的多角色、多情绪 AI 配音生成平台,支持小说、剧本、视频等内容的自动配音与导出。

何を解決するか

SonicVale (音谷) は、小説、脚本、動画向けのマルチキャラクター・マルチ感情のボイスオーバー作成プロセスを自動化するためのものです。長編コンテンツにおける個々の台詞に声や感情を手動で割り当てる作業を排除します。

仕組み

このプラットフォームは大規模言語モデル(LLM)と音声合成(TTS)エンジンを統合し、テキストを音声に変換します。LLMを使用して台詞を自動的に分割し、役割を割り当て、Index-TTS-2.0エンジンを活用して感情表現豊かな音声合成を行います。ユーザーはテキストをインポートし、キャラクターの声ライブラリを管理し、特定の感情を役割に紐づけ、最終的な出力前に正確な音声編集(例:沈黙の挿入やセグメントの削除)が可能です。

対象ユーザー

複数のキャラクターを含む物語中心のコンテンツに、高品質で感情豊かなAIボイスオーバーが必要なコンテンツクリエイター、著者、動画制作担当者。

主な特徴

  • 自動台詞分割: カスタマイズ可能なプロンプトとLLMを使用して、脚本をキャラクターごとの台詞に分解。
  • マルチ感情対応: Index-TTS-2.0を統合し、異なるキャラクターに微細な感情トーンを提供。
  • キャラクター管理: 複数章にわたって一貫した声の紐づけを維持するための専用役割ライブラリ。
  • 精密な音声編集: 手動で音声断片を削除したり、沈黙を挿入してリズムを調整可能。
  • 柔軟な統合: OpenAI APIプロトコルに対応する任意のLLMをサポート。

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト