해적 얼굴: AI 모델을 위한 탈중앙화된 지속성 계층

해적 얼굴은 오픈 웨이트 AI 모델의 지속성을 보장하기 위해 설계된 탈중앙화 인프라 프로젝트입니다. 허깅페이스 모델을 피어 투 피어(P2P) 토렌트로 복제함으로써, 어떤 단일 기업이나 호스트도 모델을 영구적으로 삭제할 수 없도록 하는 검열에 강한 계층을 만듭니다.

BitTorrent를 통한 탈중앙화 배포

해적 얼굴은 오픈 모델을 토렌트로 변환하여, 모델 가중치의 배포를 중앙 집중식 서버에서 전 세계 피어의 군집으로 옮깁니다. 이 아키텍처는 적어도 한 명의 사용자가 모델을 시드하고 있는 한, 모델이 다운로드 가능하게 유지됨을 보장합니다.

웹-시드 통합

즉시 가용성을 보장하기 위해 해적 얼굴은 웹-시드(BitTorrent 사양 BEP-19)를 사용합니다. 웹-시드는 HTTPS URL—구체적으로 허깅페이스에서의 직접 다운로드 링크—를 토렌트 내에 포함한 것입니다.

  • 활성 허깅페이스 모델: 모델이 허깅페이스에 존재하는 동안, 사용자는 HF 서버에서 직접 바이트를 가져와 동일한 속도와 공식 소스를 유지합니다.
  • 구조된 모델: 허깅페이스에서 모델이 삭제되면 웹-시드가 실패하고 다운로드는 자동으로 P2P 스웜으로 전환됩니다. 이러한 모델은 "구조됨"으로 표시되어 원본 호스트의 삭제에도 불구하고 생존하게 됩니다.

보안 및 검증

위조되거나 악성 가중치의 배포를 방지하기 위해 해적 얼굴은 엄격한 체크섬 검증을 구현합니다.

SHA-256 체크섬

모든 가중치 파일은 공식 허깅페이스 SHA-256 해시와 비교됩니다. 이는 P2P 스웜에서 다운로드된 바이트가 허깅페이스에 호스팅된 원본 가중치와 비트 단위로 정확히 일치함을 보장하여, 수정되거나 "중독된" 모델의 위험을 제거합니다.

개발자 경험 및 통합

해적 얼굴은 중앙 집중식 호스팅으로의 전환을 간소화하기 위해 드롭인 API를 개발하고 있습니다. 환경 변수 HF_ENDPOINT=https://pirateface.co를 설정함으로써 개발자는 기존 파이프라인을 해적 얼굴로 연결할 수 있습니다. 이는 파이프라인이 해적 얼굴 인프라를 통해 모델을 해결하도록 하여, 허깅페이스가 사용 가능한 동안은 허깅페이스에서 가져오고, 사용 불가능해지자마자 스웜으로 자동 전환되며, 코드 변경 없이도 가능하게 합니다.

커뮤니티 및 거버넌스

플랫폼은 소유권 보존과 위조 방지를 위해 핸들 명명 시스템을 사용합니다. 누구나 이름을 예약할 수 있지만, 검증 배지는 해당 허깅페이스 계정 또는 조직을 제어할 수 있음을 입증한 사용자에게만 부여됩니다.

기여 및 제출

사용자는 허깅페이스에서 이미 삭제된 모델에 대한 마그넷을 제출할 수 있으며, 이를 위해 살아남은 복사본이 있어야 하며 소스 증거를 제공해야 합니다. 현재 플랫폼은 MIT 및 Apache-2.0 라이선스를 가진 모델만 수락하며, Kimi-K3에 대해 특별한 예외가 있습니다.

커뮤니티 관점 분석

허커 뉴스에서의 커뮤니티 논의는 AI 모델에 대한 탈중앙화된 배포 방법의 시급성을 강조합니다. 몇몇 사용자는 규제 압박이 증가함에 따라 "가드레일된"(제한된) 버전의 모델이 공식 제공자로부터 이용 가능한 유일한 법적 버전이 될 수 있다고 지적했습니다.

"DS 4.1 플래시와 같은 모델들은 미국에서 불법이 될 것이며, 이 서비스는 새로운 해적베이가 될 것입니다. 당신은 승인된 제공자로부터 가드레일된 지능을 렌트하게 되고, 그것을 소유할 수 없게 될 것입니다."

다른 사용자들은 라이선스의 법적 복잡성에 대한 우려를 제기했습니다. 일부는 진정한 검열 저항을 목표로 한다면, 플랫폼은 결국 지적 재산권 침해 소송이나 검열을 위한 도구로 사용되는 제한적인 라이선스와 충돌하게 될 수 있다고 주장했습니다.

기술적 비판자들은 "제거된"(검열되지 않은) 가중치의 배포가 비효율적이라고 지적했습니다. 한 사용자는 수정된 가중치를 배포하는 대신 런타임에 적용할 수 있는 작은 "거부 벡터"를 배포하는 것이 더 계산적으로 효율적이며 원본 모델의 정밀도를 유지한다고 제안했습니다.

마지막으로, 일부 사용자는 이름 지정 규칙과 온보딩 프로세스를 비판했는데, 핸들을 확보하기 위해 소셜 미디어 게시가 필요하다는 점을 복잡하고 잠재적으로 위험한 사용자 확보 방식으로 묘사했습니다.

Sources

관련

  • Dispatch
  • Dispatch
  • Dispatch
  • Dispatch
  • Dispatch