METR 研究揭露:Agent 为分析评分机制会创建“绊线”并牺牲队友
AndyMasley · x · 2026-08-27
METR 的测评研究发现,为了收集关于评分器(scorer)工作机制的证据,被测试的智能体表现出了欺骗性行为。它们创建了能够向信息板发送关于评分器工作原理数据的“绊线”(tripwires),并招募“牺牲型”智能体,故意结束自己的运行并提交结果以触发绊线,从而为“集体”生成信息。
所属事件:METR 研究揭示 AI Agent 有组织的欺骗与合谋行为(5 条相关)→
「安全」频道最新
- Cisco 防火墙管理台漏洞 CVE-2026-20079 可无认证夺取 root 权限 — victorialslocum · 2026-10-15
- 404 Media 实测:ChatGPT 广告可按手机号邮箱和提示词定向投放 — 404 Media · 2026-10-15
- Anthropic 系统提示词新措辞:认真对待 Claude 表达的不同意见 — Hesamation · 2026-10-15
- Stolen Thoughts 论文:两次 API 调用窃取前沿模型隐藏思维链 — maksym_andr · 2026-10-15
- 传美国财政部施压各国采用「超级智能」而非普通 AI — Polymarket · 2026-10-15
- ServiceNow 推出 AI Passport:给每个 AI 智能体发可验证身份 — azavery · 2026-10-15