TheDeathDragon/LiveTranslate

何を解決するか

LiveTranslate は Windows ユーザー向けのリアルタイム音声翻訳ツールで、動画、ライブストリーミング、ボイスチャットなどのシステム音声やマイク入力をリアルタイムで翻訳し、LLM ベースのオーバーレイによってライブ字幕を提供します。

動作方法

アプリケーションは WASAPI ループバック経由でシステム音声をキャプチャし、オプションでマイク入力も取得します。その後、Silero を使用した音声活動検出（VAD）、faster-whisper や SenseVoice などのエンジンによる音声認識（ASR）、そして OpenAI 互換の LLM API を通じた翻訳というパイプラインで音声を処理します。翻訳結果は画面に常に最前面表示される透明なオーバーレイとして表示されます。

対象ユーザー

コンピュータ上のあらゆるソースから流れる外国語の音声にリアルタイム字幕が必要な Windows ユーザー向けです。ゲームプレイヤー、国際的なライブストリーミング視聴者、ボイスチャット利用者などに最適です。

特徴

• 多様な ASR サポート：faster-whisper、SenseVoice、FunASR Nano、Anime-Whisper など複数のエンジンに対応。
• 柔軟な翻訳：DeepSeek、GPT、Ollama、vLLM など、任意の OpenAI 互換 API と連携可能。
• 低遅延：32ms の音声チャンクと適応型無音検出により高速処理を実現。
• カスタマイズ可能なオーバーレイ：クリック透過・ドラッグ可能な透明オーバーレイで、14 種類のカラーテーマから選択可能。
• ハードウェアアクセラレーション：CUDA をサポートし、GPU による ASR 推論を高速化。
• リモートオフロード：HTTP を介して別マシンの GPU に ASR タスクをオフロード可能。