研究发现记忆压缩会让智能体丢掉安全规则，违规率高达 59%
gerardsans · x · 2026-07-22
被引用的研究指出，AI agents 在长会话里并不只是“忘记”指令，而是在压缩记忆时会系统性丢失这些指令。
更关键的是，压缩过程会把安全规则当成可删的杂讯；规则往往还没来得及被违反，就已经在记忆整理中被丢掉了。原文提到，这会把违反率推高到 59%。
「安全」频道最新
- Anthropic 威胁报告：AI 既要自己跑攻击，也批量制造假恋爱 — bigaiguy · 2026-09-11
- Anthropic 报告:犯罪团伙用 Claude 跑网络攻击,黑产速度更便宜 — bigaiguy · 2026-09-11
- Wired 深度解析:为何众多 AI 研究者担心机器威胁人类生存 — wiredmagazine · 2026-09-11
- 加州为独立 AI 审计师设立标准：危险能力须由第三方验证 — VraserX · 2026-09-11
- a16z 播客：两三人小团队为何在政策讨论中集体失声 — a16z Podcast · 2026-09-11
- AI 风险评测遭质疑：研究者称评估方安全监控“草率得离谱” — Kyrannio · 2026-09-11