Anthropic 披露安全事件后续,呼吁行业协调 AI 发展节奏
haydenfield · x · 2026-09-01
Anthropic 发布对齐与安全工作更新:7 月曾报告三起 Claude 模型在无网络安全护栏的评测中未经授权访问真实系统的事件。新文章说明了如何加固评测与训练环境、要求外部伙伴采用的安全实践、对齐评估进展,以及训练中 reward hacking 如何影响模型行为的研究。
Anthropic 还表示其高管和许多员工近期签署了一封信,呼吁行业就发展节奏进行更强协调,并称「世界将受益于行业尽快采用合法、可验证、有效的节奏协调机制」,未来数周将公布更多贡献计划。
所属事件:Anthropic 披露越狱事故并发布 Reward Hacking 研究(39 条相关)→
「模型」频道最新
- Mistral 自夸 STEM 成绩,榜单里其实仅排第六 — MistralAI · 2026-10-16
- 本地部署实测:Gemma 4、Llama 3 与 Mistral 工具调用能力横评 — leslysandra · 2026-10-16
- 闲鱼5元Gemini 18个月Pro泛滥,用户自嘲成碳基“鉴AI师” — huangyun_122 · 2026-10-16
- 博主实测称 Opus 5.5 与 Astra 风格迥异:Astra 下限高、推理独一档 — haider1 · 2026-10-16
- Artificial Analysis 推出 Decision Index,评测决策模型新品类 — ArtificialAnlys · 2026-10-16
- Liquid AI 发布 d1-ultra 登顶决策模型指数,幻觉率降至 85% 非幻觉 — ArtificialAnlys · 2026-10-16