56 位 AI 从业者票选最能判断前沿模型的基准:Terminal-Bench 4 居首
eliebakouch · x · 2026-11-16
Chris Barber 调研了 56 位 AI 从业者,让他们从 63 个基准中选出最信任的、能指示 LLM 是否达到前沿水平的基准。结果:Terminal-Bench 4 以 25 票居首,Terminal-Bench Science 20 票,FrontierCode 13 票,FrontierSWE 10 票,Humanity's Last Exam 8 票,Vending-Bench 7 票;AutomationBench、DeepSWE、PostTrainBench 各 5 票。最常见的评论是大家其实对现有基准都不太信任。规则要求不能投自己公司参与制作的基准、指数或人工投票榜。完整榜单见 frontierlist.com/top-benchmarks。
「研究」频道最新
- Chollet 称推理链生成是搜索,网友追问插值还剩什么 — teortaxesTex · 2026-11-16
- 研究:分解式输出层让小模型在同等算力下用上 131k 词表 — BLCNYY · 2026-11-16
- Terence Tao:数学已从证明稀缺进入证明过剩时代 — haider1 · 2026-11-16
- 16641 例临床决策分析:错误 AI 建议对医生的伤害大于正确建议的收益 — ValerioCapraro · 2026-11-16
- 免费在线书《The Science of Computing》:从偏微分方程讲到缓存与内存性能 — burkov · 2026-11-16
- 受控实验:语音联合从头训练始终优于分离式预训练 — giffmana · 2026-11-16