art-from-the-machine/Mantella

Mantella is a Skyrim and Fallout 4 mod which allows you to naturally speak to NPCs using a Speech-to-Text → LLMs → Text-to-Speech pipeline

What it solves

Mantella 讓玩家可以在 Skyrim 和 Fallout 4 中與 NPC 進行自然、由 AI 驅動的對話，將靜態的對話樹取代為動態的互動。

How it works

該模組整合了多種 AI 技術來建立對話迴圈：它使用語音轉文字 (Moonshine 或 Whisper) 來擷取玩家輸入，使用大型語言模型 (LLMs) 來生成回應，並使用文字轉語音 (Piper, xVASynth, 或 XTTS) 來為 NPC 的回應配音。

Who it's for

想要在遊戲中與角色進行更具沉浸感、開放式互動的 Skyrim 和 Fallout 4 玩家與模組開發者。

Highlights

  • 支持多種語音轉文字引擎 (Moonshine, Whisper)。
  • 與多種文字轉語音選項 (Piper, xVASynth, XTTS) 相容。
  • 同時適用於 Skyrim 和 Fallout 4。