langchain-ai/langsmith-sdk

LangSmith Client SDK Implementations

何を解決するか

開発者が言語モデルやインテリジェントエージェントのデバッグ、評価、監視を行うための手段を提供します。プロンプトの開発とプロダクション準備完了アプリケーションのデプロイの間のギャップを埋め、LLMベースのアプリケーションの内部動作を可視化します。

動作方法

SDKは、既存のLLMクライアント（OpenAIなど）をラップするか、デコレーターを使用してコードの実行をトレースできます。トレースとAPIキー用の環境変数を設定することで、SDKはテレメトリデータをLangSmithプラットフォームに送信し、実行トレースを可視化・分析します。

対象ユーザー

モデルの出力品質を評価し、パフォーマンスを追跡し、エラーをデバッグする必要があるLLMアプリケーションやインテリジェントエージェントの開発者。

特徴

  • LangChain PythonおよびJSライブラリとのネイティブ統合。
  • PythonおよびJavaScript/TypeScriptの両方をサポート。
  • 標準LLMクライアントをラップして自動トレースを可能にする。
  • 使用するフレームワークにかかわらず、あらゆるLLMアプリケーションと互換性あり。

関連

  • プロジェクト
    langfuse/langfuse-python

    Langfuseプラットフォーム用のPython SDKで、LLMアプリケーションの観測性、トレーシング、評価、プロンプト管理を提供します。

  • プロジェクト
    langwatch/langwatch

    LLM評価およびAIエージェントテストのためのプラットフォーム。エンドツーエンドのシミュレーション、本番環境のオブザーバビリティ、およびガバナンスのためのAIゲートウェイを提供します。

  • プロジェクト
    JudgmentLabs/judgeval

    LLM駆動アプリケーションの障害を検出および修正するためのトレースとエージェントジャッジ評価を提供する、エージェント改善のためのオープンソースPython SDK。

  • プロジェクト
    lmstudio-ai/lmstudio-js

    The official JavaScript/TypeScript SDK for LM Studio, enabling developers to integrate local LLMs into applications with advanced memory and hardware controls.

  • プロジェクト
    traceloop/openllmetry

    OpenTelemetry 上に構築されたオープンソースの可観測性フレームワークで、LLM アプリケーション、プロバイダー、ベクトルデータベースに対して完全なトレースとモニタリングを提供します。