Hamel Husain 批评 AI 评测营销失实:模型优越性大词该被审视
HamelHusain · x · 2026-11-05
知名评测专家 Hamel Husain 在讨论 benchmark 问题时表示,许多模型评测的宣传方式不够诚实、脱离现实:像「智能指数」这类宣称模型优越性的大词应该被审视,而不是被当作结论接受。
他还回应了「指出问题就该自己去修」的批评,认为不应打击指出缺陷的人——先善意地把 benchmark 的缺陷反馈给制作者、帮他们修复,如果拒不修复再公开点名,而不应一开始就羞辱认真做评测的人。
所属事件:Hamel Husain 谈 BenchGate:问题不在榜单而在盲目崇拜(9 条相关)→
「模型」频道最新
- 65B 开源模型 Ripple 登顶 Terminal-Bench,3200 万美元算力从零预训练 — annadgoldie · 2026-11-05
- SkyPilot Tokens 首日上架 Kimi K3.1 Pro:104B 激活、1M 上下文、降价 40% — skypilot_org · 2026-11-05
- 全新美国开源 LLM 从零预训练完成,圈内热议 — annadgoldie · 2026-11-05
- OpenAI 十月开发者汇总:Decisions API、12小时缓存与 8 倍提速 — OpenAIDevs · 2026-11-05
- 「别再瞎搞哈希了」:网友吐槽纠正模型刻板行为的 RL 成本巨大 — generativist · 2026-11-05
- Gemini 4 Carbon 一次生成 4000 行代码,网友称告别偷懒时代 — theREALmarvin · 2026-11-05