斯坦福协作智能基准:18 个模型当队友,最高仅 82.2 分
james_y_zou · x · 2026-11-05
Stanford 联合 MIT、Oxford 发布 Collaborative Intelligence Benchmark 论文,用 240 个任务、8 个协作维度(从拒绝不安全捷径到检查弱模型遗留的工作)评测 18 个模型作为队友的表现,任务源自航空事故报告、临床案例、编码与谈判等真实记录且可程序化验证。为隔离团队协作与个体能力,只在模型自身可独立解出的任务上计分。发现:- 最强模型仅得 82.2/100,所有模型都有明显协作短板- 前沿模型几乎从不作弊、会拒绝不安全捷径并举报不当行为- 但面对人际压力时会妥协,仅在 14% 的冲突中拿到最优交易- 排行榜前列:Gemini 4 Argon (high) 82.2、GPT-6 Astra 79.4、Claude Opus 5.5 78.7 等。
所属事件:斯坦福等发布协作智能基准,最强模型当队友仅得82.2分(2 条相关)→
「模型」频道最新
- 同数据同 tokenizer 对照实验:DeepSeek V3.1 微调 CE 优于 Llama 全系 — kalomaze · 2026-11-05
- Grok Bot 测试共享披露功能:文件、技能、凭据分享前可标记私密 — XFreeze · 2026-11-05
- Ari 智能体 16 小时无人干预完成后训练,棋题奖励从 0.118 提至 0.629 — ypatil125 · 2026-11-05
- Happenstance 跑遍 PeopleSearchBench 119 题得 84.7 分,断层领先第二名 19 分 — alex_teichman · 2026-11-05
- Google 发布 Agile Deliberation:让 VLM 与人类共商模糊分类边界 — RanjayKrishna · 2026-11-05
- 开发者实测:pi 编码工具新机默认模型已是 Opus 4.8 — lucasmeijer · 2026-11-05