作者补刀：这个化学基准现状糟糕，存在多处捷径
tak3sh8 · x · 2026-10-06
作者在/thread 的补充推文中指出，数据集中其他化学题也存在类似捷径，并给出最终结论：这个化学基准按现状来看相当糟糕，使用时需警惕模型通过捷径而非真实化学理解拿分。
所属事件:小模型只喂答案也能涨分，化学基准被曝存捷径(2 条相关)→
「研究」频道最新
- OCBench 提供「类人」脚本策略，让机器人 BC/RL 研究数据近乎无限 — kevin_zakka · 2026-10-06
- 苹果研究团队招收 2027 年博士实习生:视频模型、3D/4D 重建等方向 — HildeKuehne · 2026-10-06
- MemAdapter：用反事实推理缓解长期记忆引发的谄媚问题 — Ruqing Ning · 2026-10-06
- 北大 Code2Games：编码智能体生成可玩 3A 游戏世界并适配 UE5 — PekingUniversity · 2026-10-06
- QuantCode：领域预训练+SFT 让开源模型交易代码通过率翻倍 — Alexey Chernysh · 2026-10-06
- 处理边界慢轨道:子采样+外推修正,保证 Mandelbrot 面积估计无偏 — geoffreyirving · 2026-10-06