dominostars/playtranslate

解決する課題

PlayTranslateは、ゲーマーや言語学習者が画面上のテキストをリアルタイムで翻訳できるように設計されたAndroidアプリケーションです。翻訳機に手動でテキストを入力する手間を省き、ゲーム、ビジュアルノベル、漫画の会話や、カメラを通じた現実世界のテキストを、体験を中断することなく翻訳できます。

仕組み

このアプリは光学文字認識 (OCR) を使用して、画面やカメラからテキストをキャプチャして読み取ります。その後、さまざまな翻訳エンジンを通じてテキストを処理します。ユーザーは、オフライン翻訳モデル（ML Kitや専用のNMTエンジンなど）を選択するか、DeepL、OpenAI、Gemini、Claudeなどの高品質なオンラインサービスのAPIキーを入力して利用できます。

対象ユーザー

• ゲーマー：完全に理解できない言語のゲームをプレイしたい方。
• 言語学習者：ゲームを学習の媒体として活用したい方（単語検索、ふりがな/ピンインのヒント、Ankiフラッシュカードへのエクスポート機能などを利用）。

主な特徴

• リアルタイム翻訳：ワンタップ翻訳や、会話の変化に応じた自動翻訳をサポート。
• 言語ツール：辞書定義付きの単語検索、読み方のヒント（ふりがな/ピンイン）、テキスト読み上げ機能。
• オフライン機能：デバイス内蔵のOCRと翻訳モデルを提供し、インターネットなしでも使用可能。
• 言語学習統合：Yomitan辞書と統合し、文章を直接AnkiDroidへエクスポート可能。
• 柔軟なキャプチャ：カスタムキャプチャ領域をサポートし、デュアルスクリーンや分割画面のAndroidデバイスでも動作。
• カメラ翻訳：平面トラッカーを使用した現実世界のテキストのライブ翻訳。