AI 工程师:把自建评测当一等公民才决定项目成败
一位 AI 实验室从业者分享经验称,解决真实业务问题不靠最大模型或最炫 agent 框架,而是把评测(evals)作为项目一等公民并根据客户反馈持续迭代,通用指标反而有害。另一位从业者补充:项目初期零 eval 也可以,前提是知道需要时如何补建——先想清应用逻辑与 UX 是否成立,再与领域专家共同搭建评测集。
2026-10-29 ~ 2026-10-30 · 2 条相关
- AI 工程师忠告:把自建 evals 当一等公民才是项目成败关键 — paulabartabajo_ · 2026-10-29
- 零 eval 起步没问题:先定 UX,再和领域专家共建评测集 — Al_Grigor · 2026-10-30