Hugging Face 缓存大瘦身:v1.32 跨仓库去重,同权重 5 库只占 20GB
victormustar · x · 2026-09-18
huggingfacehub v1.32 引入本地缓存层面的内容寻址去重:基于 Xet 的相同文件在多个仓库间只存储一次。作者举例:如果 5 个仓库共享同一个 20 GB 的权重文件,磁盘占用从约 100 GB 降到约 20 GB。
- Xet 早已让远端存储按内容寻址,这次把这一特性延伸到了本地缓存
- blob 一旦已在本地方,其他仓库可直接复用,无需再下载任何数据
- 对频繁拉取多个共享底座模型(微调、量化变体)的用户是实打实的磁盘节省
所属事件:huggingface_hub v1.32 引入跨仓库共享下载缓存(2 条相关)→
「Infra」频道最新
- NEURA 发布 Neuron AI,欧洲具身智能的真正考验在协同落地 — ingliguori · 2026-11-04
- S3 数据库并不慢:内存+NVMe 缓存摊薄成本,写延迟差距比想象小 — mgill25 · 2026-11-04
- 开源 gpu-unlock 项目让 GeForce AI 推理提速最高 2 倍 — paranoidray · 2026-11-04
- 这 10 篇 GPU 优化论文决定了今天模型跑得多快 — NandoDF · 2026-11-04
- 用一句提示词让 AI 排查跨区流量:迁移服务省掉跨大西洋延迟 — DanielLockyer · 2026-11-04
- SurrealDB 4 发布:多模型数据库瞄准 Agentic 时代 — Scobleizer · 2026-11-04