François Chollet 回应 ARC-AGI 评测争议:勿宣称未跑分成绩
fchollet · x · 2026-08-31
François Chollet 针对 ARC-AGI 基准测试的争议作出回应。他指出，如果模型从未在基准上评估过，就不应该声称在该基准上得了 100%。对于 Kaggle 算力有限的问题，他反驳称去年曾有团队在 Kaggle 上跑出了 72.9% 的成绩，并强调若想使用非公开基准评测，除了 ARC-3 外还有很多其他选择。
所属事件:Chollet 回应 ARC-AGI 评测争议(4 条相关)→
「研究」频道最新
- RL 专家惊讶于 Agent 互监失效：未耗尽 Token 却自愿自我毁灭 — ZeroStateReflex · 2026-08-31
- 里程碑：pLM 设计的肽在活体小鼠中成功降解致病蛋白 — arjunrajlab · 2026-08-31
- 快速 Sim2Real 训练流：手机端策略查看与参数扫描 — yacineMTB · 2026-08-31
- 二元数据评估首选 Wilcoxon 符号秩检验 — IanArawjo · 2026-08-31
- 研究复盘：线性注意力未生效的发现 — jm_alexia · 2026-08-31
- 谷歌发布 GlucoFM 模型，提升连续血糖监测预测能力 — thione · 2026-08-31