koharu-rs/koharu

해결하는 문제

Koharu는 만화 번역이라는 복잡하고 다단계적인 과정을 자동화합니다. 이미지 내 텍스트 탐지, 텍스트 추출, 번역, 그리고 새로운 텍스트를 자연스럽게 배치하기 위한 원본 아트워크 복원 과정을 간소화합니다.

작동 방식

Koharu는 데이터 프라이버시를 보장하기 위해 비전 및 언어 모델을 사용자 기기에서 직접 실행하는 로컬 우선 파이프라인을 사용합니다. 여러 전문 AI 작업을 조정합니다. 탐지 모델을 사용하여 말풍선과 텍스트 영역을 식별하고, OCR 모델로 원문 텍스트를 읽으며, 생성형 인페인팅 모델로 원본 텍스트를 제거하고 배경을 재구성합니다. 마지막으로 LLM(로컬 GGUF 모델 또는 원격 API)을 사용하여 번역을 수행하며, 최종 교정 및 식자 작업을 위한 웹 기반 캔버스를 제공합니다.

대상 사용자

이 도구는 만화 로컬라이제이션의 기술적인 번거로움을 처리하고자 하는 만화 독자, 번역가, 편집자를 위해 설계된 전문가급 로컬 우선 애플리케이션입니다.

주요 특징

• 모든 데이터 처리를 사용자 기기에서 수행하는 로컬 우선 아키텍처.
• CUDA, ROCm, Metal, Vulkan 등 다양한 하드웨어 가속 지원.
• 원본 텍스트 제거 후 아트워크를 재구성하는 생성형 인페인팅 통합.
• 탐지, OCR, 인페인팅, 번역을 위해 특정 모델을 선택할 수 있는 유연한 파이프라인.
• 수동 정리, 텍스트 배치 및 최종 검토를 위한 웹 기반 에디터 내장.