langwatch/langwatch

Open-Source Agent Observability & Evals for AI Platform teams. Trace, test, route and govern every agent & coding assistant in the company.

LangWatch – LLM 驱动应用的观测与治理

LangWatch 是一个开源平台,帮助团队在公司内部对每次大语言模型(LLM)调用进行运行、监控、测试和治理。它适用于编码助手(Claude Code、GitHub Copilot 等)、基于LangChain/LangGraph构建的LLM智能体,以及任何兼容OpenAI或Anthropic的端点。核心代码采用Apache-2.0许可;可选的企业版扩展增加了额外功能,需要商业许可。


平台功能

领域 功能
LLM 运维 实时观测LLM调用、提示词版本控制、基于模拟的测试以及评估仪表板。
编码智能体 按拉取请求或团队跟踪编码助手使用情况,查看成本明细,并实施隐私控制。
AI 网关 一个兼容OpenAI/Anthropic的端点,可发放带有预算限制的虚拟密钥,将请求路由到不同模型,并应用速率限制。
AI 治理 组织中所有AI工具的清单、使用报告以及异常检测规则(例如,未使用的Copilot订阅)。

快速开始

步骤 命令/操作
试用托管云 访问https://app.langwatch.ai并注册。
在本地跟踪编码智能体 npx langwatch claude (将 claude 替换为 codex、copilot、opencode 等)
自托管服务器 npx @langwatch/server – 仅需Node.js。

该仓库还发布Python SDK(pip install langwatch)和npm包(npm i langwatch)。详细的安装步骤在文档中。


集成(按README中列出)

  • 编码助手 – Claude Code、OpenAI Codex、GitHub Copilot CLI、Opencode、Cursor、MCP服务器等。
  • 框架 – LangChain、LangGraph、Vercel AI SDK、Mastra、CrewAI、Google AI SDK、DSPy、OpenTelemetry。
  • 模型提供商 – OpenAI、Anthropic、Azure OpenAI、Vertex AI、AWS Bedrock等。
  • 治理源 – Copilot Studio、Claude Cowork、Anthropic/OpenAI的合规API、Workato、Databricks Genie、OpenTelemetry/S3审计流。
  • 无代码平台 – LangFlow、Flowise、n8n。

典型用例

  1. 模拟测试 – 编写测试场景,重放LLM调用以基准测试智能体或语音助手。
  2. 成本优化 – 测量Claude Code每个PR的成本,并调整提示词以延长使用限制。
  3. 预算访问 – 为内部团队或外部客户发放带有每密钥支出上限的虚拟API密钥。
  4. 许可卫生 – 识别未充分利用的AI订阅(例如,Copilot Studio)并取消。

许可与安全

  • 核心平台:Apache 2.0。
  • 企业模块(位于 enterprise/):生产使用需要商业许可。
  • SDK采用MIT许可。
  • 声称符合GDPR并拥有ISO 27001认证;安全问题可报告至 security@langwatch.ai。

了解更多


总结: LangWatch是一个面向重度依赖LLM和AI智能体的组织的生产级观测、测试和治理堆栈,提供免费的开源核心版本和商业企业版。

相关

  • 项目
  • 项目
  • 项目
  • 项目
  • 项目