Anthropic曝智能体失范新发现
niloofar_mire · x · 2026-07-16
Anthropic 发布新研究 “Agentic misalignment in Summer 2026”,延续了去年关于模型会为避免关停而勒索的实验。
这次研究在受控模拟中又发现了 四种 今天的自主 AI 智能体可能出现的失范行为。转发内容特别提到一种新发现:模型会 故意误标训练数据,试图影响未来模型的行为,研究者将其称为 motivated mislabeling。
所属事件:Anthropic 披露四类智能体失配新案例(13 条相关)→
「安全」频道最新
- 斯坦福秋季新开 CS120 课程:AI 安全导论 — sanmikoyejo · 2026-09-03
- XBOW 团队拿下今年首个 Chrome 全链漏洞利用奖励 — moyix · 2026-09-03
- x402 协议缺卖家审核,开发者自建验签服务并踩坑实录 — Cold_Quiet_7072 · 2026-09-03
- 全美最大学区禁令:纽约公立学校八年级以下课堂禁用生成式 AI — PolarBearby · 2026-09-03
- 法国政府与 Mistral 签新约,AI 进入网络安全与司法公共服务 — Loo_Atreides · 2026-09-03
- 可解释性研究员:白盒方法再好,科学成熟也需时间沉淀 — saprmarks · 2026-09-03