art-from-the-machine/Mantella

Mantella is a Skyrim and Fallout 4 mod which allows you to naturally speak to NPCs using a Speech-to-Text → LLMs → Text-to-Speech pipeline

What it solves

Mantella 允许玩家在 Skyrim 和 Fallout 4 中与 NPC 进行自然、AI 驱动的对话，将静态的对话树替换为动态的交互。

How it works

该模组集成了多种 AI 技术来创建一个对话循环：它使用语音转文字 (Moonshine 或 Whisper) 来获取玩家输入，使用大语言模型 (LLMs) 来生成响应，并使用语音转文字 (Piper, xVASynth, 或 XTTS) 来为 NPC 的响应进行配音。

Who it's for

想要在 Skyrim 和 Fallout 4 中与游戏内角色进行更具沉浸感、开放式交互的玩家和模组制作者。

Highlights

支持多种语音转文字引擎 (Moonshine, Whisper)。
兼容多种文本转语音选项 (Piper, xVASynth, XTTS)。
同时适用于 Skyrim 和 Fallout 4。