50 次 Agent 测试:没有一个模型去读文档

ducha_aiki · x · 2026-10-26

一组针对五个模型的 agent 任务评测结果(图示):Sonnet 5.5、Flash、Luna、Terra 均通过 10/10,Flash-Lite 为 7/10;速度差异巨大——Sonnet 5.5 中位耗时 24 秒,Flash 却要 9.7 分钟。

最反直觉的发现:50 次运行中,没有任何一个模型去抓取文档页面或查阅文档——作者感叹「agents 和人真像」:都急着把任务做完,没人读说明书。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →