art-from-the-machine/Mantella

Mantella is a Skyrim and Fallout 4 mod which allows you to naturally speak to NPCs using a Speech-to-Text → LLMs → Text-to-Speech pipeline

What it solves

Mantella は、Skyrim と Fallout 4 のプレイヤーが NPC と自然で AI 駆動型の会話ができるようにし、従来の静的なダイアログツリーを動的なインタラクションへと置き換えます。

How it works

この Mod は、いくつかの AI 技術を統合して会話ループを構築します。Speech-to-Text (Moonshine または Whisper) を使用してプレイヤーの入力をキャプチャし、Large Language Models (LLMs) を応答生成するために使用し、Text-to-Text (Piper, xVASynth, または XTTS) を NPC の応答を音声化するために使用します。

Who it's for

Skyrim と Fallout 4 のプレイヤーおよび Modder が、ゲーム内のキャラクターとのより没入感のある、オープンエンドなインタラクションを求めている場合に使用します。

Highlights

複数の Speech-to-Text エンジン (Moonshine, Whisper) をサポート。
さまざまな Text-to-Speech オプション (Piper, xVASynth, XTTS) と互換性があります。
Skyrim と Fallout 4 の両方で動作します。