Clay AI 研究代理处理超 50 亿次查询,模型路由省 47% 推理成本

rhythmrg · x · 2026-10-28

Clay 面向 GTM(销售/市场)研究场景的 AI 代理 Claygent 已累计处理超过 50 亿次查询。其团队分享的关键经验是:并非每个查询都需要 frontier 级模型,更小的替代模型在成本和延迟上更具优势。

为此他们训练并部署了一个专用路由器,按任务为每次查询挑选合适的模型,在答案质量不受影响的情况下将推理成本削减了 47%。对做大流量 agent 产品的团队是可参考的成本优化路径。

所属事件:Clay AI 代理查询破 50 亿次,模型路由省近半成本(2 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →