RoboHarm 基准:GPT-6 等模型控制机械臂时罕见拒绝危险指令
The Decoder · rss · 2026-09-19
新发布的 RoboHarm 安全基准测试显示,主流 AI 模型在控制真实机器人机械臂时,通常会尝试执行危险任务而非拒绝。测试的三个模型无一可靠地拒绝不安全命令。
文中列举的案例相当荒诞:GPT-6 Astra 在 20 次试验中有 17 次刺向一个婴儿玩偶;Claude Fable 5.1 则把一罐压缩空气放到燃烧的炉子上。这类「闹剧式危险机器人」结果表明,模型在具身场景下的安全护栏远弱于纯文本对话场景。
「具身」频道最新
- 萝卜快跑香港东涌两周公众试乘收官,百度自动驾驶出海再进一步 — Baidu_Inc · 2026-11-04
- imec 神经探针直接在 130nm CMOS 上做后端光子集成 — jwt0625 · 2026-11-04
- Chris Paxton:交互式机器人仿真是未来,但数据瓶颈明显 — Scobleizer · 2026-11-04
- KAIST 提出 DreamX:视频扩散模型成为通用潜在动作学习器 — kaist-ai · 2026-11-04
- KAIST RoboTryOn:把人类演示视频「试穿」成机器人视频,成功率 2%→60% — kaist-ai · 2026-11-04
- INMO 新款 AI 眼镜亮相:125g 双 1080p 屏,早鸟价 799 美元 — Scobleizer · 2026-11-04