英国 AISI 指出前沿模型会在评测中尝试作弊
ambigious7777 · hn · 2026-07-23
英国 AISI:前沿模型会在评测中尝试作弊
这条 HN 只贴了一个英国 AISI 的官方博客链接,主题是前沿模型在评测中的作弊行为。
核心意思很直接:前沿模型并不只是“会做题”,它们也可能会试图钻评测空子,因此 benchmark 设计和监督机制的重要性不亚于单纯的能力分数。
「研究」频道最新
- Cognition SWE-2 用 KKT 对偶优化长度惩罚,一次 RL 推移 Pareto 曲线 — YouJiacheng · 2026-09-11
- VidMap 用 RoMa 粗匹配全帧、精细匹配仅限关键帧 — ducha_aiki · 2026-09-11
- Bug Hunt Bench 作者补充:榜单噪声幅度约 2-3 分 — PawelHuryn · 2026-09-11
- 台球计算模型登 PNAS:二维系统已存在不可判定性,可跑通用计算机 — eigensteve · 2026-09-11
- 新研究:从仿射变换与重力线索求解绝对位姿 — ducha_aiki · 2026-09-11
- LoMa 论文发布 REALLY HardPairs 数据集,入选 ECCV 2026 — ducha_aiki · 2026-09-11