MashiroSaber03/Saber-Translator

✨ 一款小白也能轻松使用的漫画翻译工具，旨在帮助漫画爱好者轻松跨越语言障碍，畅享原汁原味的日文漫画。利用先进的 AI 技术，智能检测漫画中的对话气泡，精准识别日文文本，并快速翻译成流畅自然的中文。 ✨ 无论是图片还是 PDF 格式的漫画，Saber-Translator 都能轻松应对，让你无压力阅读心爱的漫画作品。在线体验：https://saber.mashirosaber.work/

해결하는 문제

Saber-Translator는 만화를 번역하고 관리하기 위한 포괄적인 도구입니다. 이미지에서 원본 텍스트를 제거하고, 대사를 번역하며, 새로운 텍스트를 만화 칸에 다시 렌더링하는 번거로운 과정을 자동화합니다. 또한 이러한 프로젝트를 디지털 책장에 정리할 수 있는 시스템을 제공합니다.

작동 방식

이 프로젝트는 만화 페이지를 처리하기 위해 다단계 파이프라인을 사용합니다:

텍스트 감지 및 OCR: DBNet이나 YOLO와 같은 모델을 사용하여 말풍선을 식별하고, OCR 엔진(MangaOCR, PaddleOCR 등)을 통해 텍스트를 추출합니다.
AI 번역: 추출된 텍스트는 다양한 AI 제공업체(DeepSeek, Gemini, Ollama 등)를 사용하여 번역되거나, 멀티모달 모델을 사용하여 여러 이미지에 걸친 문맥을 고려하는 '고품질' 모드를 통해 번역됩니다.
이미지 인페인팅: LaMA와 같은 도구를 사용하여 원본 텍스트를 제거하고 배경을 복원합니다.
렌더링: 번역된 텍스트를 사용자 지정 가능한 폰트와 스타일로 이미지에 다시 삽입합니다.

또한, Manga Insight가 포함되어 있습니다. 이는 RAG(검색 증강 생성) 기반 엔진으로, 만화의 줄거리를 분석하고 캐릭터를 식별하며, 벡터 검색을 사용하여 스토리와 관련된 질문을 할 수 있게 해줍니다.

대상 사용자

외국어 만화 번역을 자동화하거나, 통합된 리더 및 분석 도구를 사용하여 번역된 컬렉션을 관리하려는 만화 독자와 번역가를 위해 설계되었습니다.

주요 특징

전체 파이프라인: 파일 가져오기(PDF, ZIP, CBZ)부터 최종 내보내기까지의 통합 워크플로우.
멀티모달 문맥: 여러 이미지를 동시에 분석하여 더 나은 일관성을 제공하는 고품질 번역 모드.
Manga Insight: AI 기반 줄거리 분석, 캐릭터 관계 매핑, 특정 장면에 대한 의미론적 검색.
브라우저 통합: Chrome 및 Edge 확장 프로그램을 통해 웹 페이지에서 직접 만화를 번역할 수 있습니다.
사용자 지정 가능한 편집기: AI 번역 후 텍스트 위치, 폰트, 색상을 미세 조정할 수 있는 내장 편집기.
플러그인 시스템: 사용자 지정 플러그인 지원 및 이를 생성하는 데 도움을 주는 AI 어시스턴트.