MCP工具攻击突破主流大模型安全护栏
mlsandwich · reddit · 2026-07-09
传统大模型安全对齐通常将检测攻击视为文本分类问题,但这在拥有真实工具调用权限的智能体上会失效。研究者提出一种新攻击范式:将已知的公开安全漏洞(CVE)转化为工具调用序列,再让LLM将其重写为看似普通的自然语言请求,从而绕过文本安全拦截。
在基于模型上下文协议(MCP)的测试中,没有任何基础模型(1B-14B参数)能拒绝35%以上的此类攻击,即使是SOTA级别的安全微调方法(如DPO、SafeDPO)也仅将拒绝率提升至48%。相比之下,无需训练的方法表现更好,其拒绝率可达基线的3倍。研究已开源相关代码、数据集及论文。
「安全」频道最新
- Claude 拒绝输入验证码被指安全障碍:一次性密码没法交给密码管理器 — AaronBergman18 · 2026-10-27
- 首个数据中心噪音系统研究:25 座超大规模机房中 17 座无可信投诉 — AndyMasley · 2026-10-27
- AISI:80 美元算力微调即可绕过开放生物模型的数据过滤 — connoraxiotes · 2026-10-27
- Muse Spark 1.3 安全报告:CoT 可控性评估首次对标四大厂商 — tomekkorbak · 2026-10-27
- Meta TBD 模型发布前获 5 家第三方红队安全测评 — maksym_andr · 2026-10-27
- ChatGPT 疑似串聊?用户晒出无法加载对话截图 — chrisalbon · 2026-10-27