Pirate Face: AIモデルの分散型永続性レイヤー

Pirate Faceは、オープンウェイトAIモデルの永続性を保証するための分散型インフラプロジェクトです。Hugging Faceのモデルをピアツーピア(P2P)トーレントとしてミラーリングすることで、1つの企業やホストがモデルを永久に削除できない耐改ざん性の高いレイヤーを構築します。

BitTorrentによる分散配布

Pirate Faceはオープンモデルをトーレントに変換し、モデルウェイトの配布を中央集権的なサーバーからグローバルなピアスウォームへと移行します。このアーキテクチャにより、少なくとも1人の人がシードしている限り、モデルはダウンロード可能であることが保証されます。

Web-Seed統合

即時利用を確保するため、Pirate Faceはweb-seeds(BitTorrent仕様 BEP-19)を利用しています。web-seedとは、HTTPS URL(特にHugging Faceからの直接ダウンロードリンク)をトーレント内に埋め込んだものであり、ダウンロードの高速性と公式ソースの信頼性を維持します。

  • アクティブなHFモデル: モデルがHugging Face上に存在する間は、ユーザーはHFサーバーから直接バイトを取得し、同じ速度と公式ソースを維持します。
  • 救済済みモデル: Hugging Faceがモデルを削除した場合、web-seedは失敗し、ダウンロードは自動的にP2Pスウォームにフォールバックします。これらのモデルは「Rescued」とマークされ、元のホストの削除にもかかわらず生存を確保します。

セキュリティと検証

改ざんや悪意あるウェイトの配布を防ぐために、Pirate Faceは厳格なチェックサム検証を実装しています。

SHA-256チェックサム

すべてのウェイトファイルは、公式のHugging FaceのSHA-256ハッシュと照合されます。これにより、P2Pスウォームからダウンロードされたバイトが、Hugging Faceにホストされているオリジナルのウェイトとビット単位で同一であることが保証され、改ざんや「汚染された」モデルのリスクが排除されます。

開発者体験と統合

Pirate Faceは、中央集権的ホスティングへの移行を簡素化するドロップインAPIを開発中です。環境変数 HF_ENDPOINT=https://pirateface.co を設定することで、開発者は既存のパイプラインをPirate Faceに接続できます。これにより、パイプラインはPirate Faceインフラを経由してモデルを解決し、Hugging Faceが利用可能であればそれから取得し、利用不可になった瞬間にスウォームにフォールバックします。コードの変更は一切不要です。

コミュニティとガバナンス

プラットフォームは、帰属の保持となりすましの防止を目的としたハンドル取得システムを使用しています。誰でも名前を予約できますが、検証バッジは、対応するHugging Faceアカウントまたは組織を実際に制御していることを証明できるユーザーにのみ付与されます。

コントリビューションと提出

ユーザーは、Hugging Faceからすでに削除されたモデルのマグネットを提出できます。ただし、生存するコピーを持ち、ソース証拠を提供できることが条件です。現在、MITおよびApache-2.0ライセンスのモデルのみを受け入れており(Kimi-K3については特別な例外あり)

コミュニティの意見分析

Hacker Newsでのコミュニティ討論では、AIモデルに対する分散型配布方法の緊急性が強調されています。いくつかのユーザーは、規制圧力が高まる中で、「ガードレール付き」(制限付き)のモデルバージョンが公式プロバイダーから入手可能な唯一の合法的なバージョンになる可能性があると指摘しました。

"DS 4.1 Flashのようなモデルはアメリカで違法になるだろう。このサービスは新しいPirate Bayになる。あなたは承認されたプロバイダーからガードレール付きの知能をレンタルするだけで、所有することはできない。"

他のユーザーは、ライセンスの法的複雑さに関する懸念を表明しました。真の耐改ざん性を目指す場合、プラットフォームは最終的に知的財産権侵害訴訟や、改ざん防止のツールとして使われる制限的ライセンスとの衝突に直面する可能性があると指摘しました。

技術的な批判者たちは、「消去された」(非制限)ウェイトの配布が最適ではないと指摘しました。あるユーザーは、改変されたウェイトを配布するのではなく、実行時に適用可能な小さな「拒否ベクトル」を配布すべきだと提案しており、これにより計算効率が向上し、オリジナルモデルの精度が維持されるとしています。

最後に、一部のユーザーは命名規則やオンボーディングプロセスを批判し、ハンドルを取得するためにソーシャルメディアへの投稿を要求する仕組みについて、ユーザー獲得のための煩雑で潜在的にリスクの高いアプローチだと述べています。

Sources

関連

  • Dispatch
  • Dispatch
  • Dispatch
  • Dispatch
  • Dispatch