Mobile-Artificial-Intelligence/maid

Maid is a free and open source application for interfacing with llama.cpp models locally, and with Anthropic, DeepSeek, Ollama, Mistral and OpenAI models remotely.

何を解決するか

Maid は、Android デバイス上で大規模言語モデル(LLMs)を直接実行するか、リモートのAIプロバイダに接続する方法を提供します。これにより、ローカルモデルに常にインターネット接続が必要なくなるだけでなく、複数のAIサービスを統一されたインターフェースで利用できます。

動作方法

React Native で構築されたこのアプリは、llama.cpp を使用して GGUF モデルファイルのローカル推論を実行します。また、API キーを使用して OpenAI、Anthropic、DeepSeek などのさまざまなリモート API と統合されています。ユーザーはアプリ内から Hugging Face からカスタマイズされたモデルを直接ダウンロードしたり、独自のローカル GGUF ファイルを読み込むこともできます。

対象ユーザー

AIモデルをデバイス上でプライベートに扱いたい Android ユーザー、または単一の使いやすいモバイルアプリで複数のリモートAIプロバイダを管理したいユーザー。

特徴

  • ローカルおよびリモート推論: GGUF モデルを完全にデバイス上で実行するか、Mistral、Novita、Ollama などのプロバイダに接続できます。
  • モデル管理: Hugging Face のカスタマイズされたモデルをワンタップでダウンロードし、カスタムローカル GGUF ファイルもサポートしています。
  • 会話ツール: チャットを JSON 形式で作成、名前変更、エクスポート、インポート可能。
  • カスタマイズ: セッションごとに温度、top-p、top-k、コンテキスト長を調整可能。カスタムシステムプロンプトも設定可能。
  • プライバシー重視: 完全にオープンソース。広告もテレメトリもありません。

関連

  • Dispatch
  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト