Hugging Face Hub ストレージリージョン

Hugging Faceは、Enterprise Hubプランの一部としてストレージリージョンをローンチし、組織がモデルとデータセットの物理的な場所を選択できるようにしました。この機能は、デジタル主権、法令遵守、データ転送効率という重要なニーズに対応します。

規制および法令遵守

ストレージリージョンにより、規制産業の組織は厳格なデータ居所要件を満たすことができます。欧州連合内で事業を行う企業にとって、これはデータセット、モデル、推論エンドポイントがEUデータセンター内に exclusively 保存されることを保証することで、GDPRに準拠した機械学習ワークフローの開発を可能にします。

大容量ファイルのパフォーマンス向上

データをチームの物理的な場所およびインフラストラクチャに近い場所に保存することで、アップロードとダウンロードのレイテンシーが大幅に低下し、スループットが向上します。モデルの重みとデータセットファイルは通常非常に大きいため、地域ベースのストレージはパフォーマンスを大幅に向上させます。

Hugging Faceによると、ヨーロッパに所在し、EU地域にリポジトリを保存するユーザーは、データがUS地域に保存されている場合と比較して、アップロードおよびダウンロード速度が約4〜5倍速くなると期待できます。

利用可能なリージョンと設定

2023年11月現在、Hugging Faceは次のストレージリージョンをサポートしています：

• US 🇺🇸
• EU 🇪🇺
• アジア太平洋 🌏 (近日公開)

組織の設定

Enterprise Hubの組織は、専用のリージョン設定ページを通じてストレージの場所を管理できます。このインターフェースは、現在のリポジトリの場所の監査と、新しいリポジトリのデフォルトリージョンを選択するためのドロップダウンメニューを提供します。

リポジトリの可視性

デフォルト以外の場所に保存されているモデルまたはデータセットリポジトリは、リージョンタグでマークされます。これにより、組織のメンバーはリポジトリの物理的な場所を一目で特定できます。