近半 PM 岗位要求会写 Evals,四家公司晒出真金白银收益
HamelHusain · x · 2026-09-23
Lenny Rachitsky 指出 evals 在产品圈的出现频率越来越高:他分享的 25 个 PM 职位中,近一半要求有写 evals 的经验。头部公司也在持续公开 evals 投入带来的回报:
- Ramp:自动收据识别准确率从 35% 提升到 83%
- Shopify:AI workflow builder 比被替换的前沿模型方案快 2.2 倍、便宜 68%
- Harvey:重构 AI 合同审查器,内部质量分接近翻倍
- Cursor:调优 Auto Balance 路由,用户满意度大幅提升且成本降低 41%
Hamel Husain 转发并引用,呼应他与 Lenny 关于 evals 工程的讨论。
所属事件:近半PM岗位要求会写Evals，多家公司晒出量化回报(8 条相关)→
「编程与Agent」频道最新
- 开源运行时 Kiso：工具执行崩溃后「无回执」状态如何恢复 — niurenwangdadan · 2026-09-23
- 开源 GUI 智能体跨设备实测:复合任务最佳成功率仅 8% — maier_ak · 2026-09-23
- JarvisGUI 基准:跨 Android/Windows/Ubuntu 考验 GUI 智能体 — maier_ak · 2026-09-23
- 新基准 Cross-DURIAN：专测多设备 GUI 智能体跨屏协作能力 — maier_ak · 2026-09-23
- 个人 Agent 的「主动」要分层看：提醒、提案还是替你干完？ — sujingshen · 2026-09-23
- 开源工具 Enola 用代码库结构图谱约束 AI 编码智能体 — yellow-llama1 · 2026-09-23