Hugging Face 存储效率提升：从文件到分块

Hugging Face 博客介绍了其存储系统的一项重大改进：从传统的文件级存储转向分块（chunk）存储。新方案将大文件拆分为固定大小的分块，并采用内容寻址存储，显著提升了存储效率、去重能力和数据迁移速度。该技术已应用于 Hugging Face Hub 的模型、数据集和 Spaces 存储，用户无需手动操作即可享受更快的上传下载体验。