豪掷 2 万美元 API 费用：用血染钟楼测出各模型说谎与测谎 Elo 排行
moultano · x · 2026-11-06
Dwarkesh Patel 花费 2 万美元 API 费用，让多个 AI 模型互玩社交推理游戏《血染钟楼》（Blood on the Clocktower），并上线了 Clocktower Bench 基准网站，含 538 场对局回放与每步推理记录。
核心发现：
- 模型在「临场策划」与「团队推理破案」两方面今年进步显著，新模型的表现「如果朋友这样玩我会竖大拇指」；
- 排行以 Elo 计分，每个模型同时扮演好人阵营（测谎）与恶魔阵营（欺骗）；
- 两种能力高度相关：OpenAI 的领先主要来自「测谎」侧——一年内其模型的侦探能力进步速度约为 Anthropic 的 4 倍，而欺骗能力两厂大致持平；
- 作者评价 OpenAI 较新模型在此游戏上明显优于 Anthropic。
转帖者补充一个有趣猜想：同队全用同一模型的 agent，是否会更容易识别并信任「自己人」。
所属事件:Dwarkesh 花 2 万美元让 AI 互玩血染钟楼测欺骗能力(3 条相关)→
「模型」频道最新
- 从预训练到后训练全程 4-bit,团队称 68 小时完成预训练 — teortaxesTex · 2026-11-06
- METR：未观察到明确瓶颈，未来 12 个月能力进展或再加速 — paulnovosad · 2026-11-06
- 18 个月从 o3 到 Claude Mythos:公开模型与内部差距仍近 — louisvarge · 2026-11-06
- 腾讯混元 Hy4 登顶 Agent Arena，成唯一进前五的中国模型 — arena · 2026-11-06
- Agent Arena 上线入口页，腾讯混元 Hy4 居中国模型之首 — arena · 2026-11-06
- Perplexity Agent API 降价：同档研究质量更便宜，新增 ultra 档位 — ChrisUniverse · 2026-11-06