近半 PM 岗位要求会写 evals：Ramp、Shopify 等晒评测投入回报
lennysan · x · 2026-09-23
Lenny Rachitsky 指出 evals 在 PM 圈热度飙升：他上周分享的 25 个优质 PM 职位中近半要求有写 evals 的经验。他列举头部公司的回报数据：
- Ramp 用 evals 把自动收据识别准确率从 35% 提到 83%
- Shopify 的 AI 工作流构建器比原前沿模型方案快 2.2 倍、成本降 68%
- Harvey 重建 AI 合同审查器，内部质量分近翻倍
- Cursor 调优 Auto Balance 路由，用户满意度更高且成本降 41%
他因此请来 evals 领域公认高手 Hamel Husain 等做深度探讨——结论是 evals 已成 AI 产品工程的必备技能，而非可选项。
所属事件:近半 PM 岗位要求会写 evals，多公司晒回报数据(2 条相关)→
「编程与Agent」频道最新
- DigitalOcean 推出 Managed Agents 公测：闲置自动暂停，一站式计费 — SimplyAnnisa · 2026-09-23
- qBotica 从 3 人做到营收增长 335%:服务交付软件化的创始人访谈 — rschmelzer · 2026-09-23
- 一句提示词技巧:让 AI「拿出你已修复的不可抗拒证据」 — jobergum · 2026-09-23
- Stripe 自研 AI 原型工具 Harbor，5 个月产出 1.2 万个原型 — dl_weekly · 2026-09-23
- Zvi 读 Opus 5.5 系统卡：失败模式多可提示词与 harness 规避 — TheZvi · 2026-09-23
- GPT-6 Sol 与 Luna 已上线 OpenAI Codex，博主实测发现 — mark_k · 2026-09-23