oxylabs/perplexity-scraper

Perplexity Scraper Track brand mentions, analyze rankings, and gain competitor intelligence from Perplexity. Get started in minutes.

해결하는 문제

이 프로젝트는 모든 기능에 대한 공개 API가 없는 Perplexity AI에서 데이터를 프로그래밍 방식으로 추출할 수 있는 방법을 제공합니다. 개발자들이 복잡한 프록시 인프라를 관리하거나 봇 방지 시스템을 우회하지 않고도 AI 생성 응답, 구조화된 메타데이터 및 관련 출처를 자동으로 수집할 수 있습니다.

작동 방식

이 도구는 API 기반의 스크래퍼로, Perplexity에 프롬프트를 전송하고 다양한 형식으로 결과를 반환합니다. 사용자는 POST 요청을 통해 프롬프트, 자격 증명, 그리고 선택적 매개변수(예: 지리적 위치)를 제공합니다. 시스템은 동적 콘텐츠의 렌더링을 처리할 수 있으며, 파싱된 JSON, Markdown, 원시 HTML, 웹사이트의 PNG 이미지 또는 XHR/Fetch 요청 형태로 출력을 제공할 수 있습니다.

대상 사용자

AI 콘텐츠 감사, 연구 트렌드 추적, Perplexity가 정보를 요약하고 브랜드를 언급하는 방식을 모니터링함으로써 SEO 성능을 분석해야 하는 개발자 및 연구자.

주요 기능

다양한 출력 형식: JSON, Markdown, HTML, 페이지의 PNG 이미지를 지원합니다.
구조화된 데이터 추출: AI의 답변, 사용된 모델, 관련 쿼리, 인라인 제품 등의 특정 요소를 파싱합니다.
포괄적인 메타데이터 수집: 이미지, 출처, 비디오, 호텔 등의 탭에서 추가 결과를 수집합니다.
관리되는 인프라스트럭처: 글로벌 프록시 네트워크와 통합되어 IP 회전 및 봇 방지 조치를 자동으로 처리합니다.