oxylabs/oxylabs-ai-studio-py

解決的問題

此 SDK 為開發者提供了一個簡化的介面，用於與 Oxylabs AI Studio API 互動，可利用 AI 驅動的工具自動從網頁中提取結構化資料。它消除了為每個網站撰寫複雜自訂爬蟲的需要，以自然語言提示和 AI 驅動的探索取代手動的規則式爬蟲。

如何運作

SDK 包裝了多項 AI 驅動的資料提取服務：

• AI 爬蟲：使用自然語言提示，在網站的多個頁面中尋找並提取資料。
• AI 爬蟲工具：從單一頁面提取特定資料點，並可生成 JSON 資料結構以供結構化輸出。
• AI 瀏覽器代理：一種代理工具，可與網站互動（例如使用搜尋欄）以尋找並提取特定資訊。
• AI 搜尋：執行網路搜尋，並以適合 AI 處理的格式返回內容。
• AI 地圖：分析網站結構，根據關鍵字或提示識別特定類型的 URL。

適用對象

需要從動態網站獲取高品質、結構化網路資料的開發者，用於建置 AI 代理、RAG 流程或資料收集流程。

主要特色

• 自然語言提取：使用純英文提示來引導要提取的資料內容。
• 結構化輸出：支援 JSON、CSV 和 Markdown 格式，並內建資料結構產生功能。
• 代理式瀏覽：可執行瀏覽器操作（點擊、輸入等）以尋找資料。
• 地理目標定位：支援代理位置，以提取特定地區的內容。
• JS 渲染：內建支援 JavaScript 渲染，以處理現代動態網頁。