yaojingang/GEOInflow

解决的问题

GEOInflow 帮助网站所有者了解 AI 爬虫（如来自 OpenAI、Google 或 Perplexity 的爬虫）如何与他们的内容进行交互。它弥合了标准网站流量分析与 AI 搜索和训练“黑箱”之间的差距，使团队能够查看哪些页面正在被抓取、这些抓取是否成功，以及 AI 驱动的引流如何影响他们的业务。

工作原理

该系统从三个主要来源收集数据：网站上的浏览器脚本、服务器或 CDN 访问日志，以及您自己的内容清单（如 sitemaps）。它处理这些数据以识别特定的爬虫身份、跟踪请求模式，并监控可能遗漏重要内容的“盲点”。所有数据都使用 PostgreSQL 和 Redis 在您自己的自托管基础设施中进行存储和分析。

适用对象

它专为媒体发布商、内容密集型网站、开发者文档团队以及需要管理和监控多个站点的 GEO（生成式引擎优化）专业人士而设计。它为运营人员提供了查看流量报告的工具，并为维护人员提供了检查数据摄取和系统健康状况的工具。

主要亮点

• 跟踪 AI 爬虫活动，包括身份、目的和请求量。
• 将观察到的抓取数据与您自己的内容清单进行比较，以识别覆盖范围差距。
• 监控抓取成功率、延迟和潜在的访问错误。
• 集成标准网站分析，如页面浏览量、访问者路径和转化跟踪。
• 支持通过 Docker 进行自托管，并内置数据隐私控制。
• 提供清晰的基于证据的报告，以区分训练、搜索和用户触发的请求。