DeepSeek CED 与 GLM 的 KV 缓存复用机制解析
社区热议各家模型的 KV 缓存复用架构。YOCO(You Only Cache Once)设计简单:模型前半部分为普通结构,将隐藏状态再投影得到 K/V 后,后半段所有层共享同一份 KV 缓存。DeepSeek 的 CED 与 YOCO 思路类似,应用于 CSA2 层的全局分支,每层各自独立,且只缓存编码器 KV。GLM 5.2 则在保持灵活性的同时,将「按块打分」变为「按 token 打分」,块内共享 block index 以获得性能收益,各家命名与共享方式引发讨论。
2026-09-11 ~ 2026-09-11 · 4 条相关
- 第 1 集:DeepSeek V4.1 Flash 限时内测:新架构原生多模态(2026-09-08,18 条)
- 第 2 集:DeepSeek V4.1 Flash实测:极速350 tokens/s但偏实验性(2026-09-08,2 条)
- 第 3 集:DeepSeek V4-Flash 降价并改峰谷计费,9 月 10 日生效(2026-09-08,6 条)
- 第 4 集:DeepSeek V4.1 Flash 多方实测:近前沿性能,成本仅 1.4%~3.5%(2026-09-09,15 条)
- 第 5 集:DeepSeek 开源发布 V4.1 Flash,超旗舰低价引热议(2026-09-09,57 条)
- 第 6 集:DeepSeek V4.1/Flash 爆料:552B 非对称架构对标 GPT-5.6 Sol(2026-09-10,21 条)
- 第 7 集:DeepSeek V4.1 Flash 评测跑分流出,社区热议实测表现(2026-09-10,2 条)
- 第 8 集:DeepSeek 九个月将 KV 缓存压缩 54 倍至亚 KB 水平(2026-09-10,6 条)
- 第 9 集:传 DeepSeek 新模型成开源之王:碾压 GLM、Kimi 且便宜 4-10 倍(2026-09-10,3 条)
- 第 10 集:Bug Hunt Bench 发布:105 个真实 bug 横评前沿模型(2026-09-10,13 条)
- 第 11 集:DeepSeek V4.1 Flash 确认以 YOCO 架构为核心(2026-09-10,7 条)
- 第 12 集:DeepSeek V4.1 Flash 技术报告流出:死磕 KV cache 压缩(2026-09-11,44 条)
- 第 13 集:DeepSeek V4.1 Flash 登顶 Vals 开源榜,成本仅 0.3 美元(2026-09-11,2 条)
- 第 14 集:DeepSeek 发布 V4.1-Flash:552B 骨干、百万上下文(2026-09-11,5 条)
- 第 15 集:DeepSeek V4.1 Flash 评测得 40 分,幻觉率上升仍领先开源(2026-09-11,2 条)
- 第 16 集:DeepSeek CED 与 GLM 的 KV 缓存复用机制解析(2026-09-11,4 条)
- 第 17 集:DeepSeek 4.1 Flash 实测:缓存降价 7 倍,内核大升级(2026-09-11,2 条)
- 第 18 集:SGLang 24 小时适配 DeepSeek V4.1 Flash 达 873 tok/s(2026-09-12,2 条)
- YOCO 架构拆解:模型后半段所有层共享同一份 KV 缓存 — stochasticchasm · 2026-09-11
- 拆解 DeepSeek CED:YOCO 式全局分支只缓存编码器 KV — stochasticchasm · 2026-09-11
- DeepSeek CED 与 GLM 的 KV 缓存复用到底差在哪?一条推文讲清架构细节 — stochasticchasm · 2026-09-11
- GLM 5.2 的 KV 缓存共享模式有何巧思 — stochasticchasm · 2026-09-11