facebook/ThreatExchange

解決的問題

此儲存庫提供用於識別和阻止網際網路上的有害內容的工具。解決了高效檢測重複或相似的圖像和影片（內容審核）以及在組織之間共享安全威脅情資（惡意軟體、釣魚）的問題。

運作方式

此專案由多個專用工具組成：

• 雜湊演算法：影像使用 PDQ，影片使用 TMK/vPDQ，將媒體檔案轉換為唯一的數位簽章（雜湊）。這些簽章讓系統即使檔案略有不同，也能找到相似內容。
• HMA（Hasher-Matcher-Actioner）：一個可部署的 AWS 平台，用於管理已知有害內容的清單，並掃描新媒體與這些清單的比對。
• python-threatexchange：一個實作內容掃描的函式庫與命令列工具，透過 Meta 的 API 促進威脅訊號的交換。
• ThreatExchange API：一個 RESTful 系統，用於查詢與發布安全威脅資訊，例如釣魚頁面與惡意軟體。

適用對象

信任與安全團隊、安全研究人員，以及需要自動化內容審核或共享威脅情資以保護使用者的組織。

主要亮點

• 多模態雜湊：專為影像（PDQ）與影片（TMK、vPDQ）設計的演算法。
• 可擴展的基礎設施：包含針對 AWS 的 HMA 平台與與雲端無關的 Docker 版本（Open Media Match）。
• 協作式情資：與 Meta 的 ThreatExchange API 整合，實現社群範圍內的安全威脅共享。