Weaviate 推出磁盘向量索引 HFresh:受 SPFresh 启发,大而常变的集合省内存
victorialslocum · x · 2026-09-02
HFresh 现已在 Weaviate 正式发布(GA),这是一个受 SPFresh 算法启发的磁盘向量索引,专为大规模、持续变化的向量集合设计,核心是把内存占用压低。
工作原理:
- 把向量切成小的簇(postings),即相似向量的「邻域」,存放在磁盘上;
- 检索分两阶段:先在内存中用紧凑的 HNSW 索引对簇质心做查找,定位最相关的邻域;再只从磁盘取回这些 postings 做精细搜索,并用未压缩向量对最强候选重新打分排序。
这样磁盘 I/O 有界、延迟随数据集增长仍可预测,同时两层都内置了压缩。
「Infra」频道最新
- 开源推理服务器 superlinked/sie 为 Agent 提供统一模型服务 — superlinked · 2026-09-02
- 社区量化 MiniMax H3 Turbo：RTX 4060 Ti 1 分钟生成 5 秒视频 — aziib · 2026-09-02
- ComfyUI 现官方支持 AMD ROCm,Windows 可跑图像视频生成 — SeparateIntern5655 · 2026-09-02
- MLSecOps 框架：十环节守护生产环境机器学习系统安全 — goyalshaliniuk · 2026-09-02
- ODS 一键把电脑变私有 AI 服务器，5.8k Star — tom_doerr · 2026-09-02
- Anthropic 锁定 350 亿美元 Lambda 算力，Nvidia 签 15 年租约兜底 — unconventionalbook · 2026-09-02