Weka 推出KV Cache卸载方案
AccBalanced · x · 2026-07-12
Weka 提到他们做出了一种面向 KV Cache 的预 HBF 配置,利用 E-W 网络把缓存卸载到接近 LPDDR 的速度,目标是支撑从 PB 到 EB 级别的 KV Cache 容量。
他们强调这种方案可以做到 不淘汰缓存、不过度重复 prefill,并表示接下来会测试这种“token attention warehouse”在 VR + LPX 场景中的 activations;同时还提到来自 Oracle Cloud 的一个 agentic swarm profile。
「Infra」频道最新
- Tenstorrent 融资 15 亿美元,估值 62 亿较去年翻倍以上 — Beth_Kindig · 2026-10-27
- Anthropic 拟向 SpaceX 采购 1205 亿美元算力,满载后月付约 31 亿 — XFreeze · 2026-10-27
- 恶搞:用 JEV 决策模型替换 Raft 共识,写入吞吐暴跌 99.98% — irombie · 2026-10-27
- Cadence 进入领域专用 AI 模型赛道,芯片设计自动化再加码 — karlfreund · 2026-10-27
- Qdrant 自研 Universal I/O:向量库 mmap 无缝迁移到对象存储 — qdrant_engine · 2026-10-27
- Nebius 获 Citi 35 亿美元融资额度用于 GPU 采购与数据中心 — Beth_Kindig · 2026-10-26