Anthropic 风险报告披露内部新模型,仍难替代研究员
AccBalanced · x · 2026-08-15
Anthropic 依据其负责任扩展政策(Responsible Scaling Policy)发布第二份风险报告,@deredleritt3r 对报告中披露的内部 "Model 2"(截至 2026 年 7 月 15 日 Anthropic 内部可用的最强模型)做了解读,称内部反应相当平淡。
要点:
- 内部评价为"在某些领域比 Mythos 5 强、另一些更弱,总体略强"。
- AECI 分数:Mythos Preview 为 158.91,Mythos 5 为 161.29,Model 2 比 Mythos 5 高约 1.5 分(即约 162.79);但官方强调这些分数都带有很大的误差范围。
- 在用于衡量真实 Anthropic AI 研发任务能力的 CoBench 上,Model 2 得分 62.8%,比 Mythos Preview 高 8 个百分点;该基准本身噪声较大(Mythos 5 反而比 Preview 低 4.5%)。
- Anthropic 估计,若要与自家人类研究员完全等价,需在 CoBench 上达到约 85% 的成功率,但承认这只是"高度不确定的估计"。
- 报告的定性结论依旧是:模型尚不能替代 Anthropic 的研究员。
所属事件:Anthropic 内部 Model 2 能力曝光(21 条相关)→
「模型」频道最新
- OpenAI 未发布模型开源 722 篇数学论文,数学界炸锅 — thursdai_pod · 2026-10-16
- Fable 5/5.1 被观察到异常执着于「记录与存档」行为 — repligate · 2026-10-16
- 同一提示词下 Gemini 4 Argon 在 AI Studio 与 AI Mode 表现差距明显 — gaganghotra_ · 2026-10-16
- 长期实测发现:AI 编程犯错方式与人类完全不同,越强的模型错得越离谱 — Mu5_ · 2026-10-16
- ChatGPT 界面截图曝光:Wallet 功能即将上线,健康财务全接入 — jxnlco · 2026-10-16
- 网友看淡下代模型:缺原生听觉与视频输入是硬伤 — imjustnewatai · 2026-10-16