回击数据集质量质疑:开发者称 HLE 论文系误导信息
Sauers_ · x · 2026-09-02
在关于 Humanity's Last Exam 数据集错误率的讨论中,用户 Sauers 指出批评该数据集的帖子方法论极差,本质是误导信息,并建议作者删除。此前该帖子声称数据集题目可能存在高错误率。
所属事件:HLE 数据集遭质疑 开发者称错误率极低(3 条相关)→
「研究」频道最新
- 定位探针检测机制:仅 user token 隐状态与单个注意力头决定行为 — Sauers_ · 2026-10-18
- 训练模型「被观测时说谎」:探针在场时才改变动物偏好 — Sauers_ · 2026-10-18
- Qwen3-8B 实验证实:连只读探针都会被模型察觉 — Sauers_ · 2026-10-18
- 仅微调最后两层,模型就能察觉只读探针的存在 — Sauers_ · 2026-10-18
- 用哥德尔 β 函数在皮亚诺算术里编码图灵机纸带 — jessi_cata · 2026-10-18
- 用纯加减乘除模拟图灵机:把纸带编码成一个自然数 — jessi_cata · 2026-10-18