dmMaze/BallonsTranslator

深度学习辅助漫画翻译工具, 支持一键机翻和简单的图像/文本编辑 | Yet another computer-aided comic/manga translation tool powered by deeplearning

What it solves

BallonsTranslator는 딥러닝을 활용한 도구로, 만화와 코믹스 번역을 자동화하도록 설계되었습니다. 말풍선에서 원본 텍스트를 제거하고, 내용을 번역한 뒤, 원래 레이아웃을 유지하면서 번역된 텍스트를 이미지에 다시 삽입하는 번거로운 과정을 간소화합니다.

How it works

이 도구는 번역 파이프라인을 처리하기 위해 여러 AI 기반 모듈을 통합합니다:

  • Text Detection & OCR: 이미지에서 텍스트 블록을 식별(일본어와 영어 지원)하고, 다양한 OCR 모델(예: manga-ocr 또는 PaddleOCR)로 텍스트를 추출합니다.
  • Image Inpainting: 딥러닝 모델(AOT, LaMa)이나 전통 알고리즘(PatchMatch)을 사용해 원본 텍스트를 제거하고 배경을 정리합니다.
  • Translation: LLM(OpenAI 호환 API, Sakura-13B-Galgame), 전문 번역기(DeepL, Sugoi), 일반 서비스(Google, Papago) 등 다양한 번역 엔진을 지원합니다.
  • Typesetting: 원본 레이아웃을 기반으로 색상, 정렬, 방향을 추정해 번역된 텍스트를 말풍선에 자동으로 채워 넣습니다.

Who it’s for

주 대상은 만화 번역가, 스캔라이터, 그리고 최소한의 수작업으로 만화나 웹툰을 자신의 언어로 빠르게 번역하고자 하는 독자들입니다.

Highlights

  • One-click translation: 감지부터 조판까지 전체 파이프라인을 원클릭으로 자동화합니다.
  • Rich editing suite: WYSIWYG 텍스트 편집기, 마스크 편집, 수동 이미지 정리를 위한 힐링 브러시를 포함합니다.
  • Extensive translator support: 다양한 로컬 및 클라우드 기반 LLM과 번역 API와 호환됩니다.
  • Flexible output: 텍스트 기반 번역 워크플로우를 위해 Word 문서의 가져오기·내보내기를 지원합니다.
  • Hardware acceleration: NVIDIA와 Apple Silicon GPU 가속을 지원하며, 커뮤니티 주도로 AMD ROCm(ZLUDA) 지원도 제공합니다.