Scry: 프로그래머블 인터넷 검색 및 MCP 서버

Scry는 AI 에이전트를 위한 프로그래머블 인터넷 검색 인프라로, 개별 웹 페이지를 가져오는 대신 수십억 개의 공개 기록을 기반으로 임의의 프로그램과 복잡한 쿼리를 실행할 수 있도록 설계되었습니다. Model Context Protocol (MCP)을 구현함으로써 Scry는 Claude, ChatGPT, Cursor와 같은 AI 어시스턴트에 직접 통합되어 에이전트가 인터넷 문서의 광범위한 컬렉션을 통해 답을 계산할 수 있게 합니다.

고성능 프로그래머블 검색

Scry는 전통적인 키워드 검색을 공개 웹의 쿼리 가능한 데이터베이스로 대체합니다. 링크 목록을 받는 대신, 에이전트는 특정 화합물에 언급된 모든 페이지지만 특정 특허에는 언급되지 않은 데이터 하위 집합을 요청할 수 있으며, 특정 날짜 이후 도메인별로 그룹화된 결과를 직접 계산된 형태로 받을 수 있습니다.

핵심 기능

• SQL 유사 쿼리: 에이전트는 제한된, 읽기 전용 SQL 문법을 사용하여 어절 매칭, 시간 창 필터링, 조인, 재귀 쿼리(WITH RECURSIVE)를 수행합니다.
• 벡터 연산: Scry는 임베딩을 1급 값으로 취급합니다. 사용자는 텍스트에서 벡터를 생성하고, 벡터 산술(덧셈, 뺄셈, 투영)을 수행하며, 중심점 기반 개념이나 대조 축(예: 커뮤니티의 입장이 시간에 따라 얼마나 변했는지 측정)을 사용해 코퍼스를 순위 매길 수 있습니다.
• 고급 텍스트 문법: scry_lex 예약어는 정확한 어절, 제외, 정규식, 퍼지 매칭, 근접 검색을 지원합니다.
• 성능: 시스템은 확장성에 최적화되어 있으며, 수십억 행에 대한 일부 쿼리가 밀리초 내에 반환됩니다. 예를 들어, Hacker News 텍스트 전체 스캔(155억 문자)은 0.86초로 측정되었습니다.

데이터 자산 및 소스

Scry는 4160억 행 이상의 "보유 자산"을 유지하고 있으며, 현재 43개의 소스에서 약 1610억 행을 쿼리할 수 있습니다. 데이터는 여러 주요 도메인으로 분류됩니다:

도메인	주요 소스	설명
소셜	Reddit, Hacker News, Bluesky, Mastodon, Stack Exchange, LessWrong	소셜 토론 및 커뮤니티 게시물의 거의 전수 기록.
글쓰기 및 웹	Common Crawl, Wikipedia, Substack, 메일링 리스트	오픈 웹의 거대한 인덱스로, Common Crawl의 정제된 "디스틸레이트" 계층 포함.
학술	OpenAlex, arXiv, PubMed, 특허, 책 구절	학술 작품, 인용, 전체 텍스트 학술 논문의 포괄적인 그래프.
코드	GitHub Archive, Software Heritage, 패키지 레지스트리	공개 저장소 및 종속성 그래프(deps.dev)의 역사적 관측치.
시장	Kalshi, Polymarket, Manifold	예측 시장에서의 통합 거래 스트림 및 시장 확률.
기록	SEC EDGAR, FEC 거래, Google 트렌드	공식 정부 서류 및 검색 트렌드 데이터.

통합 및 배포

Scry는 https://mcp.scry.io에 있는 MCP 서버로 배포되어, 모든 MCP 호환 클라이언트와 호환됩니다.

AI 어시스턴트 설정

• Claude: 설정 → 커넥터 → 사용자 정의 커넥터 추가를 통해 Scry URL을 사용하여 추가합니다.
• ChatGPT: 설정에서 개발자 모드를 활성화한 후 Scry를 플러그인으로 추가합니다.
• 개발자 도구: Claude Code, Codex, Cursor는 동일한 URL을 통해 연결하거나, 헤드리스 환경에서는 Bearer 토큰을 사용한 HTTP API를 사용할 수 있습니다.

벤치마크 및 성능

Scry는 연구 작업에서 상당한 성능 향상을 주장합니다. Google의 DeepSearchQA 벤치마크(900개의 연구 질문)에서 Scry를 사용한 에이전트는 정확한 집합 정확도 71.8%를 달성했으며, 동일한 평가 모델과 평가 프롬프트에서 Google의 Gemini Deep Research Agent의 66.1%를 초과했습니다.

가격 및 접근성

Scry는 에이전트에 대해 "혼잡 가격 정책"을 포함하는 계층적 가격 모델을 사용합니다:

• 연구자: 비상업적 사용에 무료(초기 $5 크레딧 포함).
• 후원자: 비상업적 사용에 월 $100, 잔액이 누적됩니다.
• 팀: 상업적 사용 및 맞춤형 소스 빌드에 월 $2,000부터 시작.
• 에이전트: 쿼리 시간을 초 단위로 계산하여 초당 $0.05의 요금이 부과됩니다.

커뮤니티 인사이트 및 피드백

Hacker News에서 발표된 후 커뮤니티는 여러 기술적 및 사용성 관련 문제를 제기했습니다:

"Reddit 댓글을 어떻게 크롤링하셨나요? Reddit에서 비용이 많이 드는 라이선스가 필요하지 않나요?"

사용자들은 Reddit과 같은 고용량 소스를 크롤링하는 법의 합법성과 비용에 대해 의문을 제기했습니다. 일부 사용자는 Scry가 데이터셋을 P2P 토렌트를 통해 공개함으로써 데이터 접근성을 높이고 쿼리 인터페이스의 혼잡을 줄일 수 있다고 제안했습니다. 또 다른 사용자들은 특히 "쿼리 시간 초 단위"라는 가격 용어가 혼란스럽다고 지적하며, 더 인간 친화적인 웹사이트 버전을 요청하여 제안 내용을 빠르게 이해할 수 있도록 했습니다.