brightdata/brightdata-mcp
A powerful Model Context Protocol (MCP) server that provides an all-in-one solution for public web access.
它解决的问题
AI代理在尝试获取阻止机器人、需要验证码解决或具有地理限制的网页时常常失败。Bright Data MCP通过为代理提供单一接口来解决这个问题,该接口可以搜索网络、将任何URL抓取为Markdown或HTML、从1200多个预构建抓取器中提取结构化JSON(适用于Amazon、LinkedIn、TikTok、npm等网站),并控制远程浏览器——同时自动处理机器人检测、验证码、速率限制和代理轮换。
工作原理
该服务器通过模型上下文协议暴露32个工具,因此任何兼容MCP的客户端(如Claude、Cursor、VS Code等)都可以调用它们。您可以通过添加带有API令牌的URL来使用托管的远程服务器,或通过npx @brightdata/mcp运行本地实例。每个请求都通过Bright Data的反封锁基础设施,这意味着通常阻止普通HTTP客户端的页面会正常返回。工具被分组(搜索/抓取、浏览器自动化、GEO/LLM洞察、高级抓取),因此您只加载所需内容并保持上下文较小。对于特定平台的数据,流程是search_scrapers -> get_scraper_details -> run_scraper,以从预构建抓取器中获取干净的JSON。浏览器自动化提供远程会话,支持导航、点击、输入、表单填写、截图等。此外,还有每月5,000次请求的免费层。
适用人群
适用于构建AI代理、编码助手和聊天应用程序的开发人员,这些应用程序需要可靠、实时的网络数据。它面向任何希望为LLM提供网络搜索、页面读取、结构化数据提取或浏览器控制,而无需自己编写抓取基础设施的人。用例包括实时研究、电子商务价格比较、市场和竞争对手分析、社交媒体监控以及生成引擎优化(跟踪ChatGPT/Perplexity如何对您的品牌进行排名)。
亮点
- 32个工具,涵盖网络搜索(Google、Bing、Yandex)、页面抓取(Markdown/HTML)、结构化数据提取和远程浏览器自动化
- 1200多个预构建抓取器,适用于主要平台(Amazon、LinkedIn、TikTok、YouTube、Reddit、npm、PyPI等),返回干净的JSON
- 内置反封锁:每次请求都包含机器人检测绕过、验证码解决、代理轮换和地理定位
- 批量操作:每次调用最多10次搜索或抓取
- 托管远程服务器(无需安装)或本地npx服务器
- 工具组,只加载所需内容,减少上下文
- 免费层:每月5,000次请求,无需信用卡
相关
- 项目
- 项目
- 项目
- 项目
- 项目