hgmzhn/manga-translator-ui

해결하는 문제

만화 번역은 일반적으로 여러 수작업 단계를 필요로 합니다: 이미지 내 텍스트를 감지하고, 광학 문자 인식(OCR)을 수행하며, 텍스트를 번역하고, 원본 텍스트를 제거(인페인팅)한 후, 번역된 텍스트를 다시 대화창에 타이포그래피하는 과정입니다. 이 도구는 이러한 복잡한 프로세스를 자동화합니다.

작동 방식

다양한 AI 모델과 서비스를 하나의 파이프라인으로 통합합니다:

• 검출 및 OCR: PaddleOCR 및 MangaOCR와 같은 모델을 사용하여 만화 페이지에서 텍스트를 식별하고 추출합니다.
• 번역: OpenAI(GPT-4o), Gemini, Sakura 등의 LLM 및 번역 엔진에 연결하여 AI가 추출한 용어를 기반으로 일관성 있는 번역을 수행합니다.
• 이미지 처리: Real-CUGAN 및 MangaJaNai와 같은 모델을 사용하여 초고해상도화 및 이미지 정리 작업을 수행합니다.
• 타이포그래피: 텍스트를 대화창에 자동으로 맞추는 스마트한 버블 레이아웃 시스템을 제공하며, 가로 및 세로 텍스트 모두 지원하고, HanLP를 사용해 의미 기반 줄 바꿈을 수행합니다.
• 편집: 텍스트 상자, 색상, 폰트, 마스크에 대한 수동 조정이 가능한 시각적 에디터를 제공합니다.

대상 사용자

• 작업 속도를 높이고 싶은 만화 번역가 및 스캔레이션 그룹.
• 개인적으로 자신의 언어로 만화를 번역하고 싶은 독자.
• 종합적인 만화 번역 파이프라인을 찾는 개발자.

주요 기능

• 엔드투엔드 파이프라인: 검출에서 최종 렌더링까지 한 번의 클릭으로 처리 가능.
• 다중 모달 AI: GPT-4o 및 Gemini를 지원하여 고품질의 문맥 인식 번역을 제공.
• 시각적 에디터: 루비 문자 및 세로 텍스트를 지원하는 완전한 리치 텍스트 편집 기능.
• 스마트 레이아웃: 대화창 모양에 자동으로 텍스트 들여쓰기 및 스케일링 적용.
• 배치 처리: 전체 폴더를 처리하고, 전문 편집을 위해 PSD로 내보낼 수 있습니다.