dmMaze/BallonsTranslator

What it solves

BallonsTranslator はディープラーニング支援ツールで、漫画やコミックの翻訳を自動化するよう設計されています。吹き出しから元のテキストを除去し、内容を翻訳し、元のレイアウトを保ちつつ翻訳テキストを画像に組み込むという手間のかかるプロセスを効率化します。

How it works

このツールは翻訳パイプラインを処理するために複数の AI 駆動モジュールを統合しています：

• Text Detection & OCR：画像中のテキストブロックを検出（日本語と英語に対応）し、さまざまな OCR モデル（manga-ocr や PaddleOCR など）でテキストを抽出します。
• Image Inpainting：ディープラーニングモデル（AOT、LaMa）または従来アルゴリズム（PatchMatch）を使用して元のテキストを除去し、背景をクリーンにします。
• Translation：LLM（OpenAI 互換 API、Sakura-13B-Galgame）や専門翻訳エンジン（DeepL、Sugoi）、一般サービス（Google、Papago）など、幅広い翻訳エンジンをサポートします。
• Typesetting：元のレイアウトに基づき、色、配置、向きを推定して翻訳テキストを吹き出しに自動で配置します。

Who it’s for

主に漫画翻訳者、スキャンレーター、そして手作業を最小限に抑えて漫画やウェブトゥーンを自分の言語に素早く翻訳したい読者向けです。

Highlights

• One-click translation：検出から組版までの全パイプラインをワンクリックで自動化。
• Rich editing suite：WYSIWYG テキストエディタ、マスク編集、手動画像クリーンアップ用のヒーリングブラシを搭載。
• Extensive translator support：ローカル・クラウドの各種 LLM と翻訳 API に対応。
• Flexible output：テキスト中心の翻訳ワークフロー向けに Word 文書のインポート・エクスポートをサポート。
• Hardware acceleration：NVIDIA と Apple Silicon の GPU 加速に対応し、コミュニティ主導で AMD ROCm（ZLUDA 経由）のサポートも提供。