把「这个回答更好」变成可复用测试:Every 演讲讲模型评测与回归捕捉
every · x · 2026-11-05
Every 发布一场 Thesis: 2027 大会的免费演讲(@hammermt 主讲),主题是如何把「这个回答感觉更好」的直觉转化为可复用的测试:结合人类判断、基于模型的检查和代码来对比模型、改进 agent 并捕捉回归。
该演讲属于全日直播活动的一部分,讲者阵容涵盖 OpenAI 技术成员、红杉合伙人、Notion CEO Ivan Zhao、The Atlantic CEO、Browser Company CEO Josh Miller 等,并设 2 万美元合作伙伴赠礼。
「编程与Agent」频道最新
- 医疗 AI 催收智能体实战:单独回复没问题,连读十条就露馅 — alex_verem · 2026-11-06
- Warp 终端获赞:快速省内存的开源 ADE,支持 agent 编排 — vikvang1 · 2026-11-06
- 基于 Karpathy autoresearch 思路的 Prompt:让 Agent 只需你批准最后一步 — CurieuxExplorer · 2026-11-06
- Pinokio 8.3.7 发布:因 eMudhra 证书事件转向安全优先架构 — cocktailpeanut · 2026-11-06
- 密码学家:可验证 LLM 或让智能体互信协作成为可能 — matthew_d_green · 2026-11-06
- 开发者抱怨 Claude Code 近期质量暴跌:同样的模型表现差得多 — IanArawjo · 2026-11-06