企业 AI 账单仍在上涨,因为任务链增长快过 token 降价

rohanpaul_ai · x · 2026-07-23

这条帖子认为,企业 AI 账单变贵的根源不是单纯的 token 价格,而是 架构问题。

现在一次请求往往会触发检索、工具调用、推理循环和多步执行,因此 每个任务消耗的 token 数 上升速度,已经快过 token 单价的下降速度。帖子指出,路由和上下文管理比简单切模型更有效,因为它们是工程层面的解决方案,而不只是更便宜的推理。

文中还提到 Glean 的一项基准:相比其他 MCP 工具,它大约能减少 30% token,并获得 2.5 倍 的偏好答案,而且任务越复杂,这个优势越明显。

所属事件:模型降价但企业AI账单飙升,架构与系统开销成核心成本(7 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →