Gabriel 提出尖锐观点:在你最懂的领域,模型好坏根本无法测量

gabriel1 · x · 2026-11-19

Gabriel(gabriel1)发文批评基准测试:我们真正关心的,是模型在自己身为世界级专家的主题上能否精准推断出我们想要的东西,而做 eval 和 pair ranking 的人不可能比你自己更懂这些,所以「这根本无法测量」。

他在后续回复中补充了一个例外:数学等可验证领域除外——但所有商业与审美领域的质量都极难验证。

所属事件:Gabriel:专家领域模型好坏难测,基准测试存局限(2 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →