Cloudflare 用数学再省 100TB 内存:哈希环缩容的工程权衡
DanielLockyer · x · 2026-09-19
Cloudflare 发文介绍如何为基于 Pingora 的负载均衡服务再省下 100TB 内存(此前 DNS 团队已省 100TB)。起因是内部服务 Pingora Backend Router 的一致性哈希库 pingora-ketama 内存占用异常偏高。
- 问题根源:一致性哈希环为每台服务器维护大量哈希点,内存开销随规模放大
- 关键权衡:每台服务器最后 9 万个哈希点只换来 0.7% 的负载均衡改善,数学分析表明得不偿失,于是直接砍掉
- 做法:通过收缩一致性哈希环并配合 Rust 优化,全球范围内回收超过 100TB RAM
核心结论是在超大规模基础设施中,微小的收益提升(0.7%)也要与巨大的资源成本对照,该停就停。
「Infra」频道最新
- 特斯拉比利时建 2.8 GWh 电池项目,640 个 Megapack 已开工 — XFreeze · 2026-09-19
- wllama V3 发布：llama.cpp 的 WASM 绑定支持 WebGPU 与多模态 — ngxson · 2026-09-19
- openjev 亮相：基于 wllama 在浏览器跑本地大模型 — ngxson · 2026-09-19
- YC Paper Club 9 月 23 日办「替代算力范式」专场，聊光学与生物 GPU — ycombinator · 2026-09-19
- Lemire 解析:AMD Ryzen 两年内性能提升 50% 靠什么 — ibobev · 2026-09-19
- AI 基建市场自我纠错：假数据中心被过滤，真实算力六因子框架走红 — xtbot · 2026-09-19