Opus 被批安全分类器误伤:取自己的文档竟被拦为「推理提取」
AccBalanced · x · 2026-10-26
a16z 的 Martin Casado 转发并批评一起安全护栏误伤案例:用户称 Claude Opus 5.5 拒绝执行一项并非攻击的 JTAG 任务(尽管其是认证的「cyber」账号),随后让其把简报发给一个 OpenAI 模型时,安全分类器又因把「获取自己的文档」误判为「推理提取(reasoning extraction)」而拒绝。Casado 称该用户是系统安全与漏洞检测领域的顶级专家,并质疑「research considered harmful?」,直指当前安全分类器过于激进、误报率高的「clownshow」。
「模型」频道最新
- DeepSeek V4.1 Flash 配 OpenCode Go 近乎无限量:便宜模型干活,Opus 验证 — haider1 · 2026-10-26
- yacine 称 OpenAI 模型自 codex 5.4 起可做危险任务 — yacineMTB · 2026-10-26
- Block 发布 Dessa:仅用语音训练的全双工对话模型 — daluoseo · 2026-10-26
- DeepSeek V4.1F 登顶中国模型 FrontierMath Tier 4,得 46% — teortaxesTex · 2026-10-26
- Yacine 放话:DeepSeek 无疑已属前沿模型 — yacineMTB · 2026-10-26
- 单个神经元实验:给 Qwen 注入「快乐神经元」可改变其自我描述 — Sauers_ · 2026-10-26