Pirate Face - LLM 모델을 삭제로부터 구하는 서비스

4 hours ago 1

Pirate Face는 Hugging Face의 오픈 모델을 체크섬으로 검증한 토렌트로 미러링하고, 단일 기업 대신 P2P 네트워크가 보관하도록 하는 서비스임 토렌트에 내장된 Hugging Face 웹 시드로 피어가 없어도 다운로드할 수 있으며, 원본이 삭제되면 시딩 중인 피어들이 파일을 제공하는 방식으로 전환됨 각 가중치 파일을 Hugging Face의 공식 SHA-256과 대조해, 다운로드 경로가 달라도 원본과 동일한 바이트인지 검증함 탐색, 다운로드, 시딩은 계정 없이 가능하지만, 현재 모델 제출에는 Hugging Face 계정과 원본 등록이 필요하며 제출 대상 라이선스에도 제한이 있음 직접 모델 게시와 기존 파이프라인의 엔드포인트만 바꾸는 호환 API는 아직 준비 중이며, 현재 서비스 일부는 Hugging Face에 의존함 오픈 모델을 보존하는 P2P 계층 Pirate Face는 LLM, 이미지 모델, 오디오 모델, 데이터셋을 마그넷 링크로 배포해 단일 호스팅 플랫폼을 넘어 존속시키려는 탈중앙화 인프라임 Hugging Face의 모델을 토렌트로 미러링하고 전 세계 피어들이 보관하도록 해, 하나의 호스트가 모델을 삭제해도 배포를 이어가는 구조임 인기 모델 영역은 Hugging Face의 Apache-2.0 및 MIT 모델을 실시간 동기화하며, 모델 탐색의 대상 모델은 66만 9,000개 이상임 예시로 sentence-transformers/all-MiniLM-L6-v2는 91 MB, deepseek-ai/DeepSeek-V4.1-Flash는 765 GB, baidu/Unlimited-OCR는 6.7 GB로 표시됨 다운로드와 원본 삭제 시 전환 각 마그넷 링크에는 웹 시드(web-seed) 가 내장됨 BitTorrent 명세 BEP-19의 기능으로, 토렌트 안에 일반 HTTPS URL을 넣는 방식임 Pirate Face에서는 Hugging Face의 모델 파일 URL을 사용하므로, 원본이 있는 동안에는 피어가 0명이어도 다운로드할 수 있음 Hugging Face에 원본이 있으면 같은 가중치를 원본에서 직접 받고 체크섬을 검증하며, 원본 다운로드와 같은 속도를 제공함 원본이 삭제되면 웹 시드 대신 P2P 스웜으로 전환하고 해당 모델에 Rescued 표시를 붙임 이후 배포는 해당 파일을 시딩하는 참여자들이 유지함 스웜은 Hugging Face와 멀리 떨어진 지역에서 더 빠르게 파일을 제공할 수도 있음 각 가중치...

Read Entire Article