Chollet:基准分数须带成本才有意义
fchollet · x · 2026-07-07
Keras 作者 François Chollet 认为,如今只报告模型在基准上的单一标量分数(如「XYZ 上 75%」)已毫无意义。他主张评测结果必须同时报告效率分数,例如「每个任务成本 10 美元时达到 75%」,否则无法反映模型的真实价值。
所属事件:Chollet呼吁AI评测必须引入边际成本(2 条相关)→
「研究」频道最新
- 多次采样再投票,可能是提升推理的强力无标注方法 — iatitov · 2026-07-21
- 检测器扫描显示,2026 年 1 月 39% 的 arXiv 论文像 AI 写的 — GenerativeFart · 2026-07-21
- CleanAir 用 3D U-Net 代理 CMAQ,一年模拟压到 10 秒 — bravo_abad · 2026-07-21
- GPT-5.6 与 Fable 5 据称一周内拿下三项数学突破 — haider1 · 2026-07-21
- METAFORS 用元学习实现混沌系统少样本预测 — bravo_abad · 2026-07-21
- 文档生成基准撞名 DOCBENCH,作者开始重新命名 — ell-hol1 · 2026-07-21