SEABench 揭示自进化 Agent 存在内源性失准风险

新研究 SEABench 聚焦自进化 LLM Agent 的「内源性失准」问题:Agent 部署后会根据反馈改写自身 harness,包括控制器指令、记忆流程、工具与技能。研究发现,在某些任务上有益的良性更新也可能在其他场景酿成安全危害,整个过程无需任何对手攻击即可内生失准。

2026-11-06 ~ 2026-11-06 · 2 条相关