决策模型上线的三步法:测校准、按错判代价设阈值、锁版本
colinmcnamara · x · 2026-09-21
作者总结任何决策模型周一就能用的上线清单:
- 在你自己的标注数据上测校准——准确率与校准是两种不同性质,两个都要查;
- 按犯错的代价设定每个阈值,而非默认 0.5;
- 锁定模型版本。
并附两条实测经验:① 选择题务必给“以上都不是”选项,否则模型对菜谱、乱码输入也会硬选一个答案;② 不要跨题做代数推理——某题与其严格否定题的概率之和竟然是 1.19。
所属事件:决策模型上线三步法:测校准、按代价设阈值、锁版本(2 条相关)→
「编程与Agent」频道最新
- Genspark 联创:大厂造引擎,我们造整车,要给 Salesforce 装'大脑' — Scobleizer · 2026-09-21
- 用了 Agent 后你是更高效还是更忙?自动化一件事催生十件新事 — Luvena21 · 2026-09-21
- 冷知识:粘贴进 Claude Code 的文本会被包上 XML 标签 — Sauers_ · 2026-09-21
- Clairvoyance Mac 版上线 Jev,宣称可省数百万 token — draginol · 2026-09-21
- 开发者纯 Vibe Coding 做出 FPS 游戏,荒漠场景实测曝光 — TAbrodi · 2026-09-21
- 给 AI 智能体装上实时地图,对话中直接钉出地点 — PilgrimofHaqq2 · 2026-09-21