johnlindquist:Agent 时代不再选「最佳工具」,而是跑评测让赢家落地
johnlindquist · x · 2026-11-13
开发者 johnlindquist 引用 thdxr 关于「Agent 时代插件系统该怎么设计」的讨论(插件多由 vibe code 生成,如今多基于 JS 但需拉起庞大运行时,是否该改用 Lua 这类嵌入式语言尚无定论),并总结了一个时代转变:过去我们说「为工作选最佳工具」,现在的做法是「对每一个可用选项跑 benchmark 和 eval,实现 whichever wins」。这个说法折射出 eval 驱动开发正在取代工程师主观选型的趋势。
「编程与Agent」频道最新
- 开源权重模型仅占 T3 Code 流量 0.5%,但这是客户数据而非市场数据 — Arindam_1729 · 2026-11-13
- 持续学习 AI 系统的 7 大工程挑战:部署后仍要不断进化 — goyalshaliniuk · 2026-11-13
- OpenAI 分享 Agent 机群管理实践:持久智能体不是 SaaS,更像外包承包商 — AccBalanced · 2026-11-13
- CMU NLP 第 8 课:只保留 teacher 的 top token 可能逆转学生的学习信号 — CatAstro_Piyush · 2026-11-13
- 独立开发者用 Claude Code 做出全浏览器端视频编辑器 — vinishkapoor · 2026-11-13
- Hamel Husain 与 Shreya Shankar 新书《Evals for AI Engineers》已出实体版 — HamelHusain · 2026-11-13