dmMaze/BallonsTranslator

해결하는 문제

BallonsTranslator는 만화 및 만화 번역을 자동화하기 위해 딥러닝을 활용한 도구입니다. 텍스트 검출, 광학 문자 인식(OCR), 이미지 보정(원본 텍스트 제거), 기계 번역을 하나의 워크플로우로 통합하여 시각 매체 번역의 번거로운 과정을 간소화합니다.

작동 방식

이 도구는 네 가지 주요 모듈로 구성된 파이프라인을 통해 작동합니다:

1. 텍스트 검출: 이미지 내 텍스트 영역을 식별(일본어 및 영어 지원).
2. OCR: 해당 영역 내 텍스트를 인식하고 색상 정보를 추출.
3. 이미지 보정: AOT, LaMa, PatchMatch 등의 알고리즘을 사용해 원본 텍스트를 제거하고 배경을 복원.
4. 번역: Google, DeepL, Papago, 또는 LLM 등 다양한 엔진을 사용해 텍스트를 번역.

고급 사용자를 위해, 시각적 맥락을 활용한 LLM 통합, 번역 기록(이름과 톤의 일관성 유지), 재사용 가능한 용어집을 통해 번역 품질을 향상시킵니다. 또한 폰트 스타일, 효과, 레이아웃에 대한 수동 조정이 가능한 풍부한 텍스트 편집기도 제공합니다.

대상 사용자

주로 만화/컴ик스 번역가, 스캔레이션 그룹, 일본어나 영어로 된 만화를 자신의 언어로 번역하고 싶은 독자들을 위한 도구입니다. 수동 작업을 최소화하면서 번역을 수행할 수 있습니다.

주요 기능

• 한 번의 클릭 번역: 검출에서 타이포그래피까지 전체 과정을 자동화.
• LLM 통합: 기록, 요약, 시각 입력을 활용한 맥락 인식 번역으로 내러티브의 일관성 보장.
• 고급 이미지 편집: 마스크 편집 및 전용 수리 브러시를 통해 텍스트 영역 정리 가능.
• 유연한 번역 엔진: 로컬 모델(Sakura-13B), API 기반 서비스(OpenAI, DeepLX), 전용 만화 OCR 등 다양한 제공업체 지원.
• 풍부한 텍스트 도구: 텍스트 왜곡, 특수 효과, 일괄 형식 지정을 지원하는 WYSIWYG 편집기 제공.