小模型当裁判又塞满上下文:eval 常见反模式遭吐槽
xeophon · x · 2026-10-16
开发者 xeophon 吐槽 agent 评测中最常见的反模式:用小模型做 judge,同时又往 prompt 里塞入过多上下文。这种组合会让评判结果不可靠,是 eval 工程中值得警惕的做法。
「编程与Agent」频道最新
- 「建筑师 vs 园丁」:开发者质疑 AI 编程前的 plan-maxxing 风潮 — nptacek · 2026-10-16
- OpenRouter 发布 Armor 测试版:在 Agent 执行前拦截违规工具调用 — dfinke · 2026-10-16
- Meta 开源编程模型 Muse Spark Open 上线 Modal,主攻长程智能体任务 — AAAzzam · 2026-10-16
- Google SRE 书十周年推第二版,新增智能体时代 SRE 实践指南 — RealGeneKim · 2026-10-16
- GRPO 后训练会令分布坍缩,长程 Agent 时代反成隐患 — zsakib_ · 2026-10-16
- 开发者用 Claude 逐帧写代码,免费给创业公司画吉祥物 GIF — jeremy_goldberg · 2026-10-16