canarybyte/veridrop

解決的問題

Veridrop 解決了「偽裝」AI API 中繼或代理服務的問題。許多第三方提供者聲稱提供高階模型（如 Claude、GPT 或 Gemini）的存取，但實際上可能將請求路由至較便宜、較小的模型，或削減高階功能以節省成本。Veridrop 提供一種方法，可驗證中繼是否真實、符合官方 API 規範，並具備其所宣稱的功能。

工作原理

該工具接收 base_url、api_key 和 model 名稱，執行一組探測請求。隨後將回應與三個層級的「官方基線」（來自實際提供者的已驗證回應）進行比對：

• 欄位層級：檢查回應欄位與 ID 是否符合官方格式。
• 協定層級：驗證串流事件序列與 SSE（伺服器傳送事件）合規性。
• 加密層級：針對 Claude，特別驗證思考區塊中的 signature 欄位，幾乎不可能被中繼偽造。

也包含一個「針尖上的稻草」測試，用於驗證所聲稱的長上下文視窗是否真的可用，或輸入是否被靜默截斷。

適用對象

• 開發者與使用者：從第三方中繼服務購買 API 存取權限，希望確保自己未被詐騙的人。
• 服務提供者：希望透過透明的開源證據，證明其服務真實性與品質的人。

主要亮點

• 加密驗證：使用 Anthropic 的思考簽章，為 Claude 模型提供數學上的真實性證明。
• 上下文視窗測試：採用多層探測，檢測「高階欺詐」，即聲稱擁有大上下文視窗但實際提供小得多的情況。
• 多協定支援：支援 Anthropic Messages API、OpenAI Chat Completions 與 Gemini 的 OpenAI 相容 API。
• 隱私優先：托管版本不會將 API 金鑰持久化至磁碟，且無需註冊。
• 詳細評分：根據關鍵、主要與次要差異，提供加權分數與判定結果（通過、勉強通過、失敗）。