Hugging Face Hub 儲存區域

Hugging Face 已作為其 Enterprise Hub 計畫的一部分推出儲存區域,使組織能夠選擇其模型和資料集的實體位置。此功能滿足了數位主權、法律合規和資料傳輸效率的關鍵需求。

監管與法律合規

儲存區域使受監管行業的組織能夠滿足嚴格的數據駐留要求。對於在歐盟內運營的公司,這使得在確保數據集、模型和推理端點僅存放於 EU 數據中心的前提下,能夠以符合 GDPR 的方式開發機器學習工作流程。

大文件的效能提升

將數據存放在團隊實體位置和基礎設施較近的位置,可顯著降低上傳和下載的延遲並提高吞吐量。由於模型權重和資料集檔案通常非常大,區域存儲能提供顯著的效能提升。

根據 Hugging Face 的說明,位於歐洲且將其儲存庫存放在 EU 區域的使用者,預期上傳和下載速度將比將資料存放在 US 區域時快約 4-5 倍。

可用區域與配置

截至 2023 年 11 月,Hugging Face 支援以下儲存區域:

  • US 🇺🇸
  • EU 🇪🇺
  • Asia-Pacific 🌏 (即將推出)

組織設定

Enterprise Hub 組織可透過專用的區域設定頁面管理其儲存位置。此介面提供對當前儲存庫位置的審計,以及下拉選單以選擇新儲存庫的預設區域。

儲存庫可見性

為確保組織內部的透明度,任何預設位置以外的模型或資料集儲存庫將會標記上區域標籤。這使組織成員能夠一眼識別儲存庫的實體位置。

Sources