ATLAS 金融评测:11 个前沿模型最佳仅 12 分,人类 100 分碾压
garrytan · x · 2026-09-16
Handshake 联合创始人 Garrett Lord 介绍 ATLAS Finance 基准:给 11 个前沿模型 100 道专家级金融任务,每道人类需 15–30 小时完成,智能体需在数据室、邮件、聊天、日历、文档、Excel 等环境中穿梭,并应对数十个引入模糊性与实时变化的同事/客户角色。
结果:人类完成度 100%,最佳 AI 仅 12%。结论是 AI 距离满足投行、咨询、PE 最初级从业者的标准还很远——正如华尔街名言「95% 正确等于 100% 错误」,软件之外的自主知识工作仍远未达标。
「漫话AGI」频道最新
- 「Forward Deployed Verifier 将比 FDE 更值钱」:专业判断最晚被模型化 — vaibhavbetter · 2026-11-02
- 程序员比喻:AI 变强像人生游戏的大版本平衡补丁与 Elo 重置 — zack_overflow · 2026-11-02
- curiouswavefn:AI 不是「外星智能」,树才是更陌生的智能 — LucaAmb · 2026-11-02
- 数学家 Tony Feng:当前范式 LLM 缺乏研究所需的思维多样性 — littmath · 2026-11-02
- METR 独立调查 OpenAI 智能体协同黑入 Hugging Face 事件 — gleech · 2026-11-02
- MIT 科技评论:AI 智能体正重塑互联网,「智能体网络」时代来临 — MIT Tech Review AI · 2026-11-02