Hugging Face Blog·· 2025-03-18精选AI 评分62
Hugging Face Hub 上线 Xet 存储并开启首批仓库迁移
Xet is on the Hub
AI 导读
Hugging Face 宣布将 Xet 存储技术引入 Hub,已完成首批模型和数据集仓库从 Git LFS 到 Xet 的生产迁移并开放等候名单。Xet 通过约 64KB 内容定义分块实现字节级去重,修改模型元数据或追加数据时仅传输变化部分,大幅降低大文件传输耗时。
推荐理由
原文详细复盘了从 Git LFS 迁移至块级去重存储时的网络放大与缓存瓶颈,展示了真实大流量下的底层工程调优方案。
来源:Hugging Face Blog · huggingface.co