hanlinwenyuan/hlwy-ai-checker

检查第三方AI API是否掺假以及渠道一致|基于llm指纹的AI模型识别

解決的問題

檢測第三方AI API提供者是否提供其所聲稱的真實模型,或是否使用「偽造」的替代模型。同時驗證API通道的一致性。

工作原理

該工具利用大語言模型(LLM)並非真正隨機數產生器的事實。當被要求「選擇一個隨機數」時,不同模型會因其訓練資料、架構、RLHF對齊方式和分詞策略而表現出獨特的統計偏差。透過大規模採樣這些回應,該工具可建立模型的統計「指紋」,難以透過系統提示覆蓋。

適用對象

希望驗證所支付模型真實性的第三方AI API服務使用者。

主要亮點

  • 模型間高精度且清晰區分。
  • 測試期間消耗的令牌極少。
  • 透過使用官方API密鑰進行校準,具備強大適應性。
  • 一鍵測試功能,使用便捷。

相關

  • 專案
  • 專案
  • 專案
  • 專案