Chollet:基准分数须带成本才有意义
fchollet · x · 2026-07-07
Keras 作者 François Chollet 认为,如今只报告模型在基准上的单一标量分数(如「XYZ 上 75%」)已毫无意义。他主张评测结果必须同时报告效率分数,例如「每个任务成本 10 美元时达到 75%」,否则无法反映模型的真实价值。
所属事件:Chollet呼吁AI评测必须引入边际成本(2 条相关)→
「研究」频道最新
- RSNA 2026 深度学习实验室回归:芝加哥四天八节动手 AI 课 — PRouzrokh · 2026-10-27
- 新论文:数学数据放训练前段还是末段,取决于学习率调度 — alifcoder · 2026-10-27
- 健康领域评测研究:题目质量与多样性比数量更重要 — keunwoochoi · 2026-10-27
- 七项任务实测:开源模型开高推理档未必更好 — keunwoochoi · 2026-10-27
- 全同态加密 GPT-2 速通赛开跑:现纪录 3.031 秒/token — tensorqt · 2026-10-27
- 医疗评测:Kimi K3 平 GPT-6,但疑难病例开源落后 17 个百分点 — keunwoochoi · 2026-10-27