off-grid-ai/mobile
The Swiss Army Knife of Offline AI. Chat, Speak, and Generate Images - Privacy First, Zero Internet. Download an LLM and use it on your mobile device. No data ever leaves your phone. Supports text-to-text, vision, text-to-image
解決する課題
Off Grid AIは、完全にデバイス上で動作する完全プライベートなAIスイートを提供し、クラウド接続の必要性を排除し、データがユーザーのスマートフォンやMacから流出することを防ぎます。これにより、外部サーバーに依存することなく、多様なAI機能(テキスト、画像、ビジョン、音声)へのアクセスを必要とするプライバシー重視のユーザーの課題を解決します。
仕組み
本アプリケーションは、ネイティブのハードウェアアクセラレーション(SnapdragonのNPU、iOSのCore ML)と、llama.cppやwhisper.cppなどの最適化されたライブラリを活用して、モデルをローカルで実行します。テキスト生成にはGGUFモデル、画像にはStable Diffusion、音声認識にはWhisperをサポートしています。また、ドキュメント分析やプロジェクトのナレッジベース用に、同梱のMiniLMモデルとSQLiteを使用したローカルRAGシステムも備えています。
対象ユーザー
Android、iOS、macOSを利用しており、データの収集を伴わずにマルチモーダルなタスクを処理できる、多機能なオフラインAIアシスタントを求める、プライバシー重視の個人、開発者、およびユーザー。
ハイライト
- マルチモーダル機能: テキスト生成 (Llama 3.2, Phi-4, 等)、画像生成 (Stable Diffusion)、ビジョンAI (SmolVLM, Qwen3-VL)、および音声文字起こし (Whisper) をサポート。
- ローカルRAG: プロジェクト固有のナレッジベースを作成するための、PDFやテキストドキュメントのデバイス上での埋め込みと検索。
- ツール呼び出し: Web検索、計算機、および runaway 防止機能を備えたナレッジベース検索のための組み込みツール。
- 柔軟なモデルサポート: 独自の
.ggufファイルの持ち込みや、OllamaやLM StudioのようなOpenAI互換のローカルサーバーへの接続が可能。 - プライバシー第一: データがデバイスから外部に出ることは一切ありません。音声や画像生成を含むすべての処理は、ローカルのRAM/NPUで行われます。