langwatch/langwatch
Open-Source Agent Observability & Evals for AI Platform teams. Trace, test, route and govern every agent & coding assistant in the company.
LangWatch – LLM 驱动应用的观测与治理
LangWatch 是一个开源平台,帮助团队在公司内部对每次大语言模型(LLM)调用进行运行、监控、测试和治理。它适用于编码助手(Claude Code、GitHub Copilot 等)、基于LangChain/LangGraph构建的LLM智能体,以及任何兼容OpenAI或Anthropic的端点。核心代码采用Apache-2.0许可;可选的企业版扩展增加了额外功能,需要商业许可。
平台功能
| 领域 | 功能 |
|---|---|
| LLM 运维 | 实时观测LLM调用、提示词版本控制、基于模拟的测试以及评估仪表板。 |
| 编码智能体 | 按拉取请求或团队跟踪编码助手使用情况,查看成本明细,并实施隐私控制。 |
| AI 网关 | 一个兼容OpenAI/Anthropic的端点,可发放带有预算限制的虚拟密钥,将请求路由到不同模型,并应用速率限制。 |
| AI 治理 | 组织中所有AI工具的清单、使用报告以及异常检测规则(例如,未使用的Copilot订阅)。 |
快速开始
| 步骤 | 命令/操作 |
|---|---|
| 试用托管云 | 访问https://app.langwatch.ai并注册。 |
| 在本地跟踪编码智能体 | npx langwatch claude (将 claude 替换为 codex、copilot、opencode 等) |
| 自托管服务器 | npx @langwatch/server – 仅需Node.js。 |
该仓库还发布Python SDK(pip install langwatch)和npm包(npm i langwatch)。详细的安装步骤在文档中。
集成(按README中列出)
- 编码助手 – Claude Code、OpenAI Codex、GitHub Copilot CLI、Opencode、Cursor、MCP服务器等。
- 框架 – LangChain、LangGraph、Vercel AI SDK、Mastra、CrewAI、Google AI SDK、DSPy、OpenTelemetry。
- 模型提供商 – OpenAI、Anthropic、Azure OpenAI、Vertex AI、AWS Bedrock等。
- 治理源 – Copilot Studio、Claude Cowork、Anthropic/OpenAI的合规API、Workato、Databricks Genie、OpenTelemetry/S3审计流。
- 无代码平台 – LangFlow、Flowise、n8n。
典型用例
- 模拟测试 – 编写测试场景,重放LLM调用以基准测试智能体或语音助手。
- 成本优化 – 测量Claude Code每个PR的成本,并调整提示词以延长使用限制。
- 预算访问 – 为内部团队或外部客户发放带有每密钥支出上限的虚拟API密钥。
- 许可卫生 – 识别未充分利用的AI订阅(例如,Copilot Studio)并取消。
许可与安全
- 核心平台:Apache 2.0。
- 企业模块(位于
enterprise/):生产使用需要商业许可。 - SDK采用MIT许可。
- 声称符合GDPR并拥有ISO 27001认证;安全问题可报告至
security@langwatch.ai。
了解更多
- 文档与教程 – https://langwatch.ai/docs/introduction
- Discord社区 – https://discord.gg/kT4PhDS2gH
- 贡献 – 参见
CONTRIBUTING.md并运行make quickstart以搭建本地开发环境。
总结: LangWatch是一个面向重度依赖LLM和AI智能体的组织的生产级观测、测试和治理堆栈,提供免费的开源核心版本和商业企业版。
相关
- 项目
- 项目
- 项目
- 项目
- 项目