Agent 上下文缓存变冷,一句问候成本可达 1 美元

Arena 的分析揭示了 Agentic AI 的隐性成本:在使用 Agent 过程中休息片刻,上下文缓存会变冷,此时哪怕只发一句 "hi",系统也需要重新处理百万级 Token 的上下文并重新付费,导致单次对话成本可能高达 1 美元。文章详细解释了缓存失效机制为何会令账单激增。

2026-08-19 ~ 2026-08-19 · 2 条相关