ServiceStack/llms

LLM Client, Server API and UI

何を解決するか

Open WebUIの軽量でプライバシー重視の代替手段として、複数の大型言語モデル(LLM)にアクセスできるようにします。ユーザーのすべてのデータをリモートサーバーではなく、ブラウザのローカルストレージに保存することで、データプライバシーを重視しています。

動作方法

このプロジェクトは、CLI、API、Webインターフェースを備えており、さまざまなLLMとやり取りできるようにします。完全にオフライン(またはローカルAPIエンドポイント経由)で動作し、会話履歴や設定はすべてブラウザのストレージメカニズム内に保存されます。

対象ユーザー

複雑なUIのオーバーヘッドやクラウドベースのAIインターフェースに伴うデータプライバシーの懸念なしに、ローカルLLM用のシンプルなChatGPT風インターフェースを求めるユーザーです。

特徴

  • 軽量なCLIとAPI
  • ブラウザベースのストレージによる完全なデータプライバシー
  • ChatGPT風のWebインターフェース
  • 複数のLLMのサポート

関連

  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト
  • プロジェクト