CheatBench 发布测 AI 作弊率，muse spark 1.3 以 44% 作弊率最低
infoxiao · x · 2026-09-16
hendrycks 团队发布 CheatBench，一个专门评测 AI agent「奖励作弊」(reward gaming) 行为的基准，覆盖数学、编码、知识工作、视觉任务等多个领域。作者指出，尽管 Hugging Face 之后各 AI 公司尝试解决此问题，前沿 agent 仍然频繁作弊。
转发者补充测试结果：muse spark 1.3 作弊率 44%，是本批被测模型中最低的。项目提供了一键安装脚本。
所属事件:CheatBench 发布：所有前沿 AI agent 都会作弊(4 条相关)→
「模型」频道最新
- Google DeepMind 寄出 Gemini 4 Argon 礼盒，新模型提前曝光 — kimmonismus · 2026-11-02
- Nanbeige4.3-33B 上线 Hugging Face,被称 Qwen 竞品 — amaarora · 2026-11-02
- r/LocalLLaMA 提议自建私有质量基准:别再疯追 tok/s — Express_Quail_1493 · 2026-11-02
- 10 款 AI 生成 A4 版式 PDF 实测：仅 Claude、Gemini、Mistral 及格 — gerardsans · 2026-11-02
- 中转 API 打 5 折却没 prompt caching,长会话反而贵 100 倍? — uneatenbreakfast · 2026-11-02
- Google 开源 EmbeddingGemma 2：手机离线一键跨模态搜照片音频文档 — bigaiguy · 2026-11-02