GPT-6 Astra 解出 50 道前沿物理题中的 49 道,还纠出专家答案错误
MoonL88537 · x · 2026-10-24
30 多位理论物理学家构建的新基准 TheoPhysEval(10 月 9 日挂 arXiv)用 50 道未发表的研究级理论物理题测试 5 个现成 agent。GPT-6 Astra 在 OpenAI Codex 环境中答对 49/50(98%),平均每题成本不足 3 美元。更戏剧的是:首轮评分 Astra 只得 80 多分,模型坚称专家参考答案有误,物理学家复查后确实发现己方多处细微计算错误;修正答案后分数升至 49/50。Alex Tabarrok 总结:本想用人类答案考 AI,结果 AI 考了人类。文章还讨论了模型可能记住大量物理文献的问题及该结果对物理研究的意义与局限。
「模型」频道最新
- 中国模型发布潮将至:GLM-5.5、Qwen 4 接棒 MiniMax 与 Kimi — haider1 · 2026-10-24
- Kimi K3.1 Pro 3D 重建评测大涨 27.6 分,跻身 BuildingBench 前六 — Lianhuiq · 2026-10-24
- Kimi 订阅额度被评最差,却成中国非程序员最佳日常模型 — Linahuaa · 2026-10-24
- 初创 humans& 一周三连发:协作模型 Ampersand、社交产品 Boba 与 FTL 解码提速 10% — ericzelikman · 2026-10-24
- Nat Eliason 盲测写作风格:Argon 压倒性胜出, 称让模型全部重写 — nateliason · 2026-10-24
- 视频解读:Kimi K3.1 Pro 跑分超越 Opus 与 GPT,是否属于刷榜存疑 — TheAIGRID · 2026-10-24