oxylabs/AI-Search-py

解決的問題

AI-Search 簡化了開發人員從網路取得與提取資訊的流程。它不需要從零開始建立自訂搜尋爬蟲，而是提供一種使用自然語言搜尋網路，並可選擇性地抓取結果頁面內容的統一方式。

運作方式

此工具作為一個智慧型搜尋代理運作，透過 API 集成至 Python 應用程式中。使用者以普通英文輸入搜尋查詢，指定想要的結果數量（最多 50 筆），並可切換是否讓代理抓取頁面的完整內容，或僅回傳 URL 與標題。為處理現代的、JavaScript 輕重的網站，該工具內建 JavaScript 渲染選項，以確保能正確從動態內容中提取資料。

適用對象

專為需要自動化資料探勘與收集任務的開發人員設計，例如收集最新新聞、研究競爭對手或聚合產業動態。

主要亮點

• 自然語言查詢： 使用普通英文搜尋網路。
• 動態內容處理： 支援 JavaScript 渲染，以從單頁應用中提取資料。
• 內容提取： 可選擇性地抓取並回傳搜尋結果的 markdown 內容。
• 本地化搜尋： 使用 geo_location 參數，透過 ISO 2 字元國家代碼或座標實現搜尋結果的本地化。