Hamel 方法论:先查 10 条 traces,再决定 evals 测什么
hugobowne · x · 2026-09-04
Hugo Bowne 线程片段两条:1) 「先忘掉 evals」——亲自查看 10 条 traces,你挖出的糟糕失败案例会告诉你 evals 该测什么;2) 产品设计决定了你能拿到什么评估数据——把输出做得易于验证,产品就会自动收集更好的信号:用户反馈、标注和更易分类的错误。
所属事件:Hamel 方法论:先看 10 条 traces 再决定 evals 测什么(2 条相关)→
「编程与Agent」频道最新
- 生产级 Agent 缺执行层?开发者痛陈跨应用写操作的幂等难题 — anishfish · 2026-09-04
- AI 让写代码变便宜,但工程判断力反而更值钱了 — _jaydeepkarale · 2026-09-04
- xAI 办 Grok Bot Galaxy 三日活动，现场教你自己搭 Agent 团队 — Kyrannio · 2026-09-04
- Garry Tan:靠一文件夹 Markdown 文件,产出达 2013 年的 400 倍 — garrytan · 2026-09-04
- Hivemind 推出智能体持久记忆基础设施：无限上下文、多代理共享大脑 — Kyrannio · 2026-09-04
- Hamel:不查验数据就别做 AI 产品,agent 给不了判断力 — hugobowne · 2026-09-04