反直觉:推理力度拉满反而更差,拒绝率飙升拖垮评测成绩

_lewtun · x · 2026-10-14

Hugging Face 研究员 Lewis Tunstall 指出评测涉及安全拒绝任务(网络攻击、生物等)的闭源模型时的一个怪现象:

结果 test-time compute 曲线出现反转:算力花得最多的设置反而表现最差,因为拒绝大量吞掉了成绩。他提问:这种情况该如何公平地报告模型性能?

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →