chen-006/meow-llm-detector
用于检测ai模型是否真实
解決する課題
大規模言語モデル (LLM) の基礎となる挙動を特定し、特にAPI仲介業者やプロキシを使用している場合に、そのモデルがプロバイダーの主張通りであるかをユーザーが判断するのを支援します。これは絶対的な身元証明ではなく、「指紋のような証拠」を提供するものです。
仕組み
このツールは、ターゲットとなるモデルに一連の短い質問を送信し、その応答の分布を分析します。これらの応答パターンを確立されたベンチマークと比較することで、ターゲットモデルの挙動と既知のモデルファミリーや特定のバージョンとの一致度を推定します。
対象ユーザー
サードパーティのプロバイダーやAPIゲートウェイ経由でアクセスしているモデルの真正性を検証したい開発者およびAPIユーザー。
主な特徴
- マルチプラットフォーム対応: ポータブルなWindows版、またはmacOSおよびLinux用のソースコードを提供。
- 自動ベンチマーク: 24時間ごとにメンテナンス担当者からのベンチマークを自動的にチェックおよび更新。
- 柔軟な設定: カスタムAPI URLとキーをサポートし、定義済みのモデルリストからの選択や、カスタムリクエスト名の入力が可能。
- プライバシー重視: 一時的なキーはメモリ内に保持され、保存された資格情報はシステム資格情報ストアに格納されます。
関連
- プロジェクト
- プロジェクト
- プロジェクト
- プロジェクト
- プロジェクト