oxylabs/perplexity-scraper

解決的問題

此專案提供了一種程式化方式，從 Perplexity AI 提取資料，因為 Perplexity AI 缺乏針對所有功能的完整公開 API。它讓開發者能夠自動收集 AI 生成的回應、來源和元資料，而無需手動管理代理伺服器、瀏覽器渲染或反機器人系統。

工作原理

該工具是與 Oxylabs 的 Web Scraper API 的整合。使用者將包含提示內容和認證資訊的 POST 請求發送到 API 端點。系統會處理動態 AI 內容的 JavaScript 渲染，並以多種格式回傳結果，包括結構化 JSON、Markdown、原始 HTML 或網站 PNG 圖片。它還可以指定提示內容發送的地理位置。

適用對象

需要審計 AI 內容、追蹤資訊摘要隨時間的變化，或監控 AI 驅動搜尋結果中的 SEO 表現與品牌提及的開發者和研究人員。

主要特色

• 多種輸出格式：支援 JSON、Markdown、HTML 和 PNG，便於資料整合。
• 結構化資料提取：解析特定欄位，例如使用的 AI 模型、生成的答案、相關查詢和來源連結。
• 完整的元資料：從 Perplexity 的 UI 標籤中捕獲額外結果，如圖片、購物產品、影片和地點。
• 受管理的基礎設施：自動處理 IP 輪換、代理伺服器管理和反機器人繞過。

這是一個非常實用的工具，特別適合需要大量收集 AI 搜尋結果的開發者。— @handle