ServiceStack/llms

LLM Client, Server API and UI

解決的問題

提供一個輕量、注重資料隱私的 Open WebUI 替代方案,用於存取多個大型語言模型(LLMs)。透過將所有使用者資料儲存在瀏覽器的本機儲存空間,而非遠端伺服器,來強調資料隱私。

運作方式

此專案提供 CLI、API 和 Web 界面,讓使用者能與各種 LLM 互動。完全離線運作(或透過本機 API 端點),並確保對話歷史與設定儲存在瀏覽器自身的儲存機制中。

適用對象

希望為本地 LLM 使用簡單、類似 ChatGPT 的介面,又不想承擔複雜 UI 的開銷,也不必擔心雲端 AI 介面所帶來的資料隱私問題的使用者。

主要特色

  • 輕量級 CLI 與 API
  • 瀏覽器本機儲存,實現完全的資料隱私
  • 類似 ChatGPT 的 Web 界面
  • 支援多個 LLM

相關

  • 專案
  • 專案
  • 專案
  • 專案
  • 專案