dmMaze/BallonsTranslator

What it solves

BallonsTranslator 是一款結合深度學習的工具，旨在自動化漫畫與漫畫書的翻譯。它簡化了從對話框中移除原始文字、翻譯內容、再將翻譯後的文字排回圖像，同時保留原始版面配置的繁瑣流程。

How it works

此工具整合了多個 AI 驅動的模組以處理翻譯管線：

• Text Detection & OCR：偵測圖像中的文字區塊（支援日文與英文），並使用各種 OCR 模型（如 manga-ocr 或 PaddleOCR）提取文字。
• Image Inpainting：使用深度學習模型（AOT、LaMa）或傳統演算法（PatchMatch）移除原始文字，清理背景。
• Translation：支援多種翻譯引擎，包括 LLM（OpenAI 相容 API、Sakura-13B-Galgame）、專業翻譯器（DeepL、Sugoi）以及一般服務（Google、Papago）。
• Typesetting：自動將翻譯文字填回對話框，根據原始版面估算顏色、對齊與方向。

Who it’s for

主要對象為漫畫翻譯者、掃描翻譯組（scanlators）以及想要快速將漫畫或 Webtoon 翻譯成自己語言、且手動工作量最小化的讀者。

Highlights

• One-click translation：一鍵自動完成從偵測到排版的整條管線。
• Rich editing suite：內建 WYSIWYG 文字編輯器、遮罩編輯與修復筆刷，供手動圖像清理使用。
• Extensive translator support：相容各種本地與雲端 LLM 以及翻譯 API。
• Flexible output：支援匯入與匯出 Word 文件，以配合文字為主的翻譯工作流程。
• Hardware acceleration：支援 NVIDIA 與 Apple Silicon 的 GPU 加速，社群亦提供 AMD ROCm（透過 ZLUDA）的支援。