决策模型上线的三步法：测校准、按错判代价设阈值、锁版本
colinmcnamara · x · 2026-09-21
作者总结任何决策模型周一就能用的上线清单：
- 在你自己的标注数据上测校准——准确率与校准是两种不同性质，两个都要查；
- 按犯错的代价设定每个阈值，而非默认 0.5；
- 锁定模型版本。
并附两条实测经验：① 选择题务必给“以上都不是”选项，否则模型对菜谱、乱码输入也会硬选一个答案；② 不要跨题做代数推理——某题与其严格否定题的概率之和竟然是 1.19。
所属事件:决策模型上线三步法:测校准、按代价设阈值、锁版本(2 条相关)→
「编程与Agent」频道最新
- 两人小公司用 46 个 AI Agent 运营：审批门禁、哈希锁文件与翻车复盘 — dkovl · 2026-11-12
- LlamaIndex 让 AI Agent 渗透测试自家 LlamaParse，四天暴露四条经验 — llama_index · 2026-11-12
- Manhattan 字体 v0.0.1：每个字母都是一个 Python 函数 — allanyu_ · 2026-11-12
- 用 Backplane「提示词造出」任意扩展卡,网友呼吁扩展口回归标配 — _Stocko_ · 2026-11-12
- Agent 会话跑了 51 分钟烧 24.8 万 token,网友直呼还在干活 — _Stocko_ · 2026-11-12
- 可视化 AI Agent 团队协作：每个 Agent 一间「房间」，共享知识库 — LiorAloni11 · 2026-11-12