art-from-the-machine/Mantella

Mantella is a Skyrim and Fallout 4 mod which allows you to naturally speak to NPCs using a Speech-to-Text → LLMs → Text-to-Speech pipeline

What it solves

Mantella는 Skyrim 및 Fallout 4 플레이어가 NPC와 자연스럽고 AI 기반의 대화를 나눌 수 있게 하여, 고정된 대화 트리를 동적적인 상호작용으로 대체합니다.

How it works

이 모드는 여러 AI 기술을 통합하여 대화 루프를 생성합니다. Speech-to-Text (Moonshine 또는 Whisper)를 사용하여 플레이어의 입력을 캡처하고, Large Language Models (LLMs)를 사용하여 응답을 생성하며, Text-to-Speech (Piper, xVASynth, 또는 XTTS)를 사용하여 NPC의 응답을 음성으로 출력합니다.

Who it's for

게임 내 캐릭터와 더 몰입감 있고 개방적인 상호작용을 원하는 Skyrim 및 Fallout 4 게이머와 모더(modder)를 위한 모드입니다.

Highlights

여러 Speech-to-Text 엔진 (Moonshine, Whisper)을 지원합니다.
다양한 Text-to-Speech 옵션 (Piper, xVASynth, XTTS)과 호환됩니다.
Skyrim 및 Fallout 4 모두에서 작동합니다.