thanhkeke97/RSTGameTranslation

해결하는 문제

RSTGameTranslation은 비디오 게임에 실시간 번역을 제공하여 플레이어가 게임 창을 벗어나지 않고도 외국어 텍스트와 음성을 즉시 이해할 수 있도록 합니다. 화면의 텍스트를 자동으로 캡처하고 번역함으로써 게임 대화와 메뉴를 수동으로 번역해야 하는 번거로움을 해결합니다.

작동 원리

이 도구는 AI 기반 광학 문자 인식(OCR)을 결합하여 선택한 화면 영역에서 텍스트를 캡처하고, 대규모 언어 모델(LLM) 또는 번역 서비스를 사용하여 해당 텍스트를 번역합니다. 또한 음성 인식(STT) 기능을 갖추고 있어 게임 오디오에서 음성을 인식하고 번역할 수 있습니다. 접근성과 편의성을 위해 번역된 텍스트를 오버레이나 채팅 창으로 출력하고, 텍스트 음성 변환(TTS)을 사용하여 번역된 텍스트를 소리 내어 읽어줄 수 있습니다.

대상 사용자

이해할 수 없는 언어로 게임을 플레이하는 게이머, 그리고 AI 번역과 음성 합성을 게임 경험에 통합하고자 하는 사용자.

주요 특징

• 다양한 AI 백엔드: Gemini, Groq, ChatGPT, Google Translate를 포함한 광범위한 번역 서비스를 지원하며, Ollama 및 LM Studio와 같은 로컬 옵션도 지원합니다.
• 대화 인식: 게임 맥락 및 캐릭터 이름 감지를 위한 스마트 인식 기능이 포함되어 있습니다.
• 다재다능한 TTS: 31개 언어를 지원하는 100% 로컬 오프라인 TTS(Supertonic)를 포함하여 4가지 TTS 백엔드를 제공합니다.
• 유연한 표시: 번역된 텍스트를 위한 오버레이 및 채팅 창을 제공합니다.
• 음성 인식(STT): 게임 오디오에서 직접 음성을 인식하고 번역할 수 있습니다.