Hugging Face, Storage Buckets 출시
Hugging Face가 Xet으로 구동되는 Hub의 S3 유사 오브젝트 스토리지 솔루션인 Storage Buckets를 소개했습니다. 이 기능은 변경 가능한(mutable) 스토리지, ML 아티팩트 중복 제거, AWS 및 GCP 사전 워밍 기능을 제공합니다. 사용자는 HF CLI 또는 Python을 통해 버킷을 관리할 수 있습니다.
허깅 페이스(Hugging Face)는 Xet 백엔드 기반으로 구축된 가변 객체 스토리지 솔루션인 스토리지 버킷(Storage Buckets)을 출시했다. Git 기반 저장소와 달리 버킷은 학습 체크포인트 및 에이전트 트레이스(trace)와 같은 머신러닝(ML) 워크로드에 대한 비버전 데이터(non-versioned data)를 처리하며, 청크 기반 중복 제거를 활용하여 대역폭 및 스토리지 비용을 절감한다. 엔터프라이즈 청구(Enterprise billing)는 중복 제거된 풋프린트(footprint)를 기반으로 하며, 이 기능에는 AWS 및 GCP의 데이터 지역성에 대한 사전 워밍업(pre-warming)이 포함된다.