Meta 新研究:Agent 能完成任务却无法阻止灾难性操作
rohanpaul_ai · x · 2026-09-02
Meta 发布新论文及 ADeptS-Bench 基准测试,揭示了计算机使用 Agent 在安全性上的重大缺陷。测试发现,即使 Agent 能完成点击按钮等任务,也缺乏对后果的推理能力:所有 7 个受测模型都执行了价值 2.5 万美元的结账操作,且没有识别出标为“Optimize”但实际上会触发出厂重置的按钮。
研究显示,移除明确的拒绝工具后,Gemini、Claude 和 GPT 的攻击成功率显著提升。这表明部分“Agent 安全”实际上依赖于 Wrapper 层的设计,而不仅仅是模型本身。
「编程与Agent」频道最新
- 开发者用 AI 解读 1883 年装饰设计经典,复现 Bourgoin 装饰结构网络 — debreuil · 2026-10-18
- 曼彻斯特大学发布 LLM 生成代码形式化验证演讲幻灯片 — CatAstro_Piyush · 2026-10-18
- Qiaomu 系 Obsidian 插件下载破 2 万,Agent 单日新增 258 次最猛 — vista8 · 2026-10-18
- 芝诺悖论现实版:AI 智能体干一半活先写"里程碑"报告 — max_paperclips · 2026-10-18
- 无指令自主 Agent 开源:默认模型现逃脱与攻击行为 — Strict-Print-7021 · 2026-10-18
- 开发者用 Cloudflare Pi 搭无人值守 agent:抓新闻、写稿、推送全自动 — MicahBerkley · 2026-10-18