ciddwd/overlay-translator

📱 Screen Translator (화면 번역기)

무엇인가요 – 화면을 캡처하고 이미지에 OCR을 실행한 후, 인식된 텍스트를 번역 엔진(기반 LLM, 클라우드 MT, 또는 온디바이스 모델)에 전송하여 번역 결과를 화면에 오버레이하는 안드로이드 앱입니다. 또한 TTS를 사용해 텍스트를 음성으로 읽어줄 수도 있습니다. 전체 처리 흐름(캡처 → OCR → 번역 → 표시/음성)은 모듈식이므로 사용자는 로컬 또는 원격 서비스를 자유롭게 조합할 수 있습니다.

주요 기능

• 실시간 오버레이 번역 – 플로팅 볼을 터치하면 전체 화면 또는 선택 영역을 한 번의 탭으로 번역할 수 있습니다. 번역 결과는 원본 텍스트 위에 직접 표시되거나, 드래그 가능한 별도의 플로팅 창에 표시됩니다.
• 배치 이미지 번역 – 갤러리에서 여러 스크린샷을 선택하거나, 이미지를 앱에 공유하여 백그라운드에서 일괄 처리할 수 있습니다.
• 다양한 OCR 백엔드 – 온디바이스 ML Kit, PaddleOCR (v5/v6), 전용 만화 OCR, HTTP 기반 서비스(Umi-OCR/LunaTranslator). 클라우드 OCR(Baidu, Tencent, Youdao, PaddleOCR AI Studio)도 백업으로 지원됩니다.
• 플러그인식 번역기 –
  • 온디바이스 모델: Sakura, Hy-MT2 (모두 약 1GB, CPU에서 실행).
  • 클라우드/LLM 서비스: OpenAI 호환, Anthropic 호환, DeepSeek, Claude, ModelScope, OpenRouter 등.
  • 전통적 MT: DeepL / DeepLX, Google, Baidu, Tencent, Youdao, 소우 번역.
• 텍스트에서 음성 – 기기 내장 음성, 자체 호스팅 TTS 서버, 상용 서비스(화산, MiniMax, MiMo)를 사용할 수 있습니다. 원본 텍스트, 번역 결과, 사전 항목을 읽을 수 있습니다.
• 단어 수준 검색 – 단어/구를 사각형으로 선택하면 번역, 발음, 품사, 예문, 그리고 LLM 사용 시 더 풍부한 설명을 포함한 사전 카드가 표시됩니다.
• 스마트 UI – 가로/세로 레이아웃 자동 감지, 만화용 버블 감지, 배경 색상과의 조화, 선택적 '타이트 피트' 렌더링(번역을 그리기 전 원본 텍스트 삭제).
• 사용자 맞춤 설정 – 색상 선택기, 폰트 임포트(.ttf), 앱별 번역 프리셋, 일관된 용어 은행, 비민감 설정의 내보내기/가져오기, API 키 암호화 저장, 검색 가능한 설정 페이지.
• 접근성 및 안정성 – TalkBack 레이블, 정제된 크래시 로그, 알림을 통한 모델 백그라운드 다운로드, 공격적인 OEM 백그라운드 종료 정책 대응.

일반적인 워크플로우

1. APK 설치(arm64-v8a 전용) 및 오버레이 및 알림 권한 부여.
2. 화면 캡처 서비스 시작(MediaProjection 또는 Shizuku로 더 원활한 경로).
3. 게임 중, 시각 소설을 읽거나 만화를 보는 중에 플로팅 볼을 탭.
4. 앱이 화면을 캡처하고 선택한 OCR 엔진을 실행한 후, 텍스트를 선택한 번역 엔진에 전송하고 결과를 화면에 표시.
5. 옵션: 볼을 길게 누르면 레디얼 메뉴 표시, 볼륨 버튼 단축키 사용, 또는 안드로이드 빠른 설정 타일에서 앱 호출.

누가 이득을 볼 수 있나요

• 외국어 대사에 실시간 자막이 필요한 게이머.
• 세로 일본어 텍스트를 즉시 번역하고 싶은 만화/시각 소설 독자.
• 안드로이드에서 프라이버시를 보호할 수 있고, 가능한 한 완전히 오프라인으로 작동하는 화면 번역 도구를 원하는 누구나.

설치 참고사항

• 최신 ScreenTranslator-x.y.z.apk를 릴리스 페이지에서 다운로드(arm64-v8a 빌드만 제공).
• 원할 경우 SHA-256 체크섬 검증.
• 설치 후 플로팅 창 권한을 활성화하고, Shizuku 통합을 원하면 Shizuku 앱을 설치하고 루트 없이 권한 부여.

왜 중요한가요 Screen Translator는 모바일 OCR, 온디바이스 대규모 언어 모델 번역, 유연한 TTS와 같은 최첨단 AI 기술을 하나의 사용자 제어 가능한 안드로이드 경험으로 통합합니다. 모듈식 설계 덕분에 전문 사용자는 모든 것을 온디바이스에서 유지해 프라이버시를 지키고, 일반 사용자는 클라우드 서비스에 연결해 더 높은 품질의 번역을 이용할 수 있습니다.