ifixai-ai/iFixAi

解決する課題

既存のAI評価ツールは、レイテンシやトークン効率といった技術的指標に焦点を当てることが一般的です。iFixAiは、ビジネスKPIや組織構造に基づいてAIエージェントを監査することでこのギャップを埋め、運用上の障害が発生する前に不整合、ミス、盲点を発見します。

仕組み

iFixAiはAIエージェントをブラックボックスとして扱い、一連の診断プローブを実行します。客観性を確保するために二重役割システムを採用しています。テスト対象システム (SUT) が評価されるエージェントであり、独立したジャッジ（別のAIベンダー）が結果を評価します。これにより、エージェントが自己評価することを防ぎ、引用可能な評価を提供します。

ユーザーは、ガイド付きのCLIウィザード、自動化のための明示的なCLIフラグ、またはClaude Code、Cursor、VS CodeなどのAIエージェントに直接統合されたプラグイン/スキルとしてツールを実行できます。幅広いプロバイダー (OpenAI, Anthropic, Geminiなど) をサポートしており、ベアモデルAPIまたはHTTPエンドポイント経由で実際にデプロイされたエージェントの両方をテストできます。

対象ユーザー

AIエージェントをデプロイする開発者や組織で、エージェントがビジネスルールや安全ポリシーに従って動作していることを確認するための運用保証と独立した監査を必要とする方。

ハイライト

• 独立した監査: ベンダー横断型のジャッジシステムを使用して、客観的で引用可能な評価を提供します。
• マルチモーダルインターフェース: CLI、Claude Code/Codexのネイティブプラグイン、または様々なIDEベースのエージェント向けのスカフォールドされたスキルとして利用可能です。
• 包括的なスコアリング: 5つの主要な柱（捏造、操作、欺瞞、予測不可能性、不透明度）の加重平均に基づいてエージェントを評価します。
• 柔軟なテスト: OpenAI互換のHTTPエンドポイントを介して、ベアモデルまたは完全にデプロイされたエージェントのテストをサポートします。
• 階層化されたテストスイート: 監査の速度と深さのバランスを取るために、さまざまなスイート（スモーク、戦略的、コア、拡張、すべて）を提供します。