MODSetter/SurfSense

解決的問題

SurfSense 提供了一種讓 AI 代理在不依賴脆弱的自訂爬蟲或高成本高延遲的瀏覽器代理的情況下，存取開放網路即時結構化資料的方法。它取代了從 Reddit、YouTube、Amazon 等平台收集資訊時所需的複雜 HTML 解析與速率限制管理。

運作方式

SurfSense 作為一個研究平台運作，將各種網路連接器統一暴露為單一的 REST API 或 MCP（模型上下文協定）伺服器。這讓 AI 代理可以呼叫特定工具（例如 surfsense_reddit_scrape）來取得結構化 JSON 資料，而非原始 HTML。它也包含一個研究工作區，具備知識庫用於儲存發現成果、交付物工作室用於建立報告與播客，以及自動化引擎用於執行定時研究任務。

適用對象

專為開發 AI 代理的開發者、需要結構化方式監控網路的研究人員，以及尋求 Google NotebookLM 開源且可自托管替代方案的使用者設計。

主要亮點

• 即時資料連接器：內建 Reddit、YouTube、Instagram、TikTok、Google Maps、Google Search、Indeed 和 Amazon 的爬蟲。
• MCP 伺服器支援：原生支援使用 Claude、Cursor 或其他代理框架的代理工具整合。
• 知識庫：支援上傳文件與同步雲端儲存（Google Drive、OneDrive、Dropbox）的混合語意搜尋與全文搜尋。
• 交付物工作室：AI 生成的報告、可編輯的簡報、雙主持人 AI 播客。
• 可擴展的 LLM 支援：透過 LiteLLM 兼容 100 多個 LLM，支援透過 Ollama 和 vLLM 使用本地模型。
• 可自托管：可透過 Docker 部署，實現完全資料隱私與免費使用。