yureii1996/cek-probe-model
Untuk cek model apakah maskingan atau bukan
解決する問題
AIモデルエンドポイントが、実際に提供されていると主張するモデルを提供しているかどうかを検証する方法を提供します。モデルのラベル（例：DeepSeek）が実際に応答しているモデル（例：GPT）と異なる「アーキテクチャの不一致」をユーザーが特定するのに役立ちます。
仕組み
このツールは、Pythonスクリプトを使用して、OpenAI互換のAPIエンドポイントに単純なアイデンティティおよびロジックのプローブ（推論リクエスト）を送信します。応答内のモデルの自己申告アイデンティティを期待されるモデルファミリーと比較し、不一致を検出します。
対象者
使用しているモデルエンドポイントの信頼性と正確性を確保したいAIモデルプロバイダーの開発者およびユーザー。
ハイライト
- シンプルなPythonベースのプローブスクリプト。
- 高速プローブや、InferHubやCFRouterなどの特定プロバイダー向けの組み込み遅延/リトライを備えたスクリプトなど、複数のテスト戦略をサポート。
- アイデンティティプローブ応答に基づくアーキテクチャ不一致の自動検出。
関連
- プロジェクト
- プロジェクト
- プロジェクト
- プロジェクト