DeepSeek 磁盘缓存能力被赞统治级:API 成本暴降 90%
teortaxesTex · x · 2026-08-01
开发者社区近期再次热议 DeepSeek 推出的上下文磁盘缓存(context caching on disk)功能。该功能无需修改代码,即可将高频引用的上下文自动缓存至分布式存储。
官方数据显示,这一机制能将 API 成本降低高达 90%。在处理 128K tokens 的长提示词时,如果命中缓存,首个 token 的生成延迟将从 13 秒骤降至 500 毫秒。有开发者感叹,时隔两年,DeepSeek(及其背后的幻方)在磁盘缓存领域的统治力依然令人感到“离谱”。
所属事件:DeepSeek磁盘缓存能力爆火,API成本暴降90%(2 条相关)→
「Infra」频道最新
- 128GB Mac 硬塞 1.6TB 权重,Kimi K3 极限本地部署实测 — 机器之心 · 2026-08-01
- 传欧洲芯片巨头 NXP 拟收购自动驾驶 AI 芯片厂商 Ambarella — pstAsiatech · 2026-08-01
- 消费级笔记本跑通2.78万亿参数Kimi K3全量模型 — rickasaurus · 2026-08-01
- CXMT LPDDR6 内存接近量产,速率达 12800Mbps — bookwormengr · 2026-08-01
- OpenAI 巨型单体仓库遇性能瓶颈,团队向 Git 上游提交优化补丁 — charliermarsh · 2026-08-01
- 算力账单揭秘:国产大模型在AI编程场景为何“叫好不叫座” — 创业邦 · 2026-08-01