Trata 发布 Hedge-Bench:顶级模型金融预测准确率不过半
ycombinator · x · 2026-10-31
Trata 团队发布修订版 Hedge-Bench 基准,将开放式推理与预测能力挂钩:基于对冲基金分析师的推理轨迹构建 92 个真实环境,agent 在冻结的信息快照上做预测,并以未来真实结果评分。结果显示没有一个模型得分超过 50%,最强的 GPT-6 Astra 也只有 44.2%,说明前沿模型「听起来合理的推理」与「准确且有经济价值的预测」之间仍存在巨大鸿沟。团队还在 165 个环境上用 LLM-as-a-Judge 和逐轮信用分配对 Meta 的 Muse-Glimmer-30B 做了后训练,观察到证据……(原帖在此截断)。
「漫话AGI」频道最新
- Burkov 批超级智能愿景:80 亿人的丰裕将耗尽地球资源 — burkov · 2026-10-31
- 圣塔菲研究所 Eric Smith 温和而致命地拆解人类中心主义 — danfaggella · 2026-10-31
- Bindu Reddy 预判未来 12 个月:token 降价 80%、用量增 10 倍 — bindureddy · 2026-10-31
- 「财富加速财富失效的时代」:积累财富反而在催生让财富失去意义的文明 — Dr_Singularity · 2026-10-31
- Carl Benedikt Frey 撰文:为什么有些社会对新技术格外警惕 — carlbfrey · 2026-10-31
- Thoughtworks CTO:好开发者抗拒 Agent 编程,是深知上线不等于能用 — rseroter · 2026-10-31