Claude Code、OpenCode、Pi 如何设计提示词缓存断点

arpit_bhayani · x · 2026-10-17

Arpit Bhayani 拆解了各编码 harness 利用前缀缓存(prefix caching)的 differnt 策略:提示词前缀不变即可跳过推理,一旦早期内容变动就使后续缓存全部失效,因此 prompt 必须按「最稳定→最不稳定」排序。

一些 harness 不只缓存 system 消息,还会缓存到最后几条消息为止的前缀,从而在同一 system prompt 的多个用例间以及对话的后续轮次间复用缓存计算。模式很简单:静态内容在前、易变内容在后、每会话用稳定 key——只要中途改动 system prompt 一次,就得为整个前缀重新付费(钱和能耗都是)。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →