agentgateway

agentgateway: 무엇이며, 어떤 문제를 해결하고, 왜 주목받고 있는가

해결하는 문제

Agentgateway는 AI 에이전트를 LLM, 도구 및 다른 에이전트와 연결하는 복잡성을 해결합니다. 보안, 가시성, 거버넌스를 처리하는 중앙 프록시를 제공하여 개발자가 에이전트 기반 워크플로마다 이러한 인프라 구성 요소를 직접 구축할 필요를 없앱니다.

작동 방식

AI‑네이티브 프로토콜인 MCP(Model Context Protocol)와 A2A를 기반으로 하는 오픈소스 프록시로 동작합니다. 여러 특화된 게이트웨이를 통해 트래픽을 라우팅합니다:

  • LLM Gateway: 여러 LLM 제공자를 하나의 OpenAI 호환 API로 통합하고, 비용 제어와 로드 밸런싱을 제공합니다.
  • MCP Gateway: 다양한 전송 방식(stdio, HTTP, SSE)과 OAuth를 사용해 LLM을 외부 데이터 및 도구와 연결합니다.
  • A2A Gateway: 서로 다른 에이전트 간의 안전한 통신과 작업 협업을 지원합니다.
  • Inference Routing: GPU 사용량, 큐 깊이와 같은 실시간 메트릭을 기반으로 자체 호스팅 모델로 트래픽을 전달합니다.

대상 사용자

에이전트형 AI 시스템을 구축하는 개발자와 조직을 위해 설계되었습니다. 연결성을 프로덕션 수준으로 관리하고, 가드레일을 적용하며, 다양한 프레임워크와 환경 전반에 걸친 통신을 모니터링해야 하는 경우에 적합합니다.

주요 특징

  • 다계층 가드레일: 정규식, OpenAI moderation, AWS Bedrock, Google Model Armor를 통한 콘텐츠 필터링.
  • 엔터프라이즈 보안: JWT, API 키, OAuth 및 CEL 정책 엔진을 활용한 세분화된 RBAC 포함.
  • 가시성: 메트릭, 로그, 트레이싱을 위한 OpenTelemetry 통합.
  • 배포 유연성: 내장 컨트롤러와 Gateway API를 통한 독립형 설치 및 Kubernetes 배포 지원.

요약: 에이전트형 AI를 위한 오픈소스 연결 프록시로, 에이전트, LLM 및 도구 간 통신에 보안, 가시성 및 거버넌스를 제공합니다.

제목: agentgateway: 무엇이며, 어떤 문제를 해결하고, 왜 주목받고 있는가

Sources