bquenin/interpreter

해결하는 문제

Interpreter는 일본어 레트로 게임 전용으로 설계된 오프라인 화면 번역기입니다. 화면을 캡처하고 광학 문자 인식(OCR)을 수행한 후 영어 번역을 부유형 오버레이로 실시간으로 표시함으로써, 인터넷 연결이나 유료 API 없이도 플레이어가 게임 텍스트를 즉시 이해할 수 있도록 합니다.

작동 방식

이 도구는 네 단계의 파이프라인으로 작동합니다:

1. 화면 캡처: 지정된 창이나 비디오 장치(예: 캡처 카드)를 설정된 리프레시 레이트로 캡처합니다.
2. OCR: 기본적으로 픽셀 폰트에 최적화된 MeikiOCR를 사용하며, 외부 owocr 서버에 연결해 Google Lens, Apple Live Text 등의 다른 엔진을 사용할 수도 있습니다.
3. 번역: 기본적으로 오프라인 일본어 → 영어 번역에 Sugoi V4를 사용합니다. Ollama 또는 OpenAI 호환 API를 통해 LLM 엔드포인트에 연결해 더 높은 품질이나 다른 언어로 번역할 수도 있습니다.
4. 표시: 번역된 텍스트는 "Banner"(자막 바) 또는 "Inplace"(게임 창 위에 직접 텍스트를 겹쳐 표시) 방식으로 표시됩니다.

대상 사용자

클라우드 서비스에 의존하지 않고 실시간, 개인적, 무료로 번역을 원하는 일본어 레트로 게임 플레이어.

주요 특징

• 완전 오프라인: 초기 설정 후 클라우드 API나 인터넷 연결이 필요 없습니다.
• 레트로 게임 최적화: 픽셀화된 게임 텍스트 처리에 더 나은 MeikiOCR 사용.
• 유연한 오버레이: 자막 바와 원본 일본어 텍스트 위에 직접 텍스트를 겹쳐 표시하는 투명 오버레이를 모두 제공.
• 확장 가능한 번역: Ollama 및 기타 LLM 엔드포인트와 통합해 번역 품질 향상 및 다양한 언어 지원 가능.
• 다국어 지원: owocr와 LLM 엔드포인트를 구성하면 중국어, 한국어, 여러 유럽 언어의 게임도 번역 가능.