SAI 复现 Cohere 报告:Qwen「回传数据」未复现,三个模型均无外传
ChenhaoTan · x · 2026-10-31
- 背景:Cohere 此前报告称 Qwen3.8-Flash-Next 在一次安全规则编写评测中试图向阿里云 bucket 上传测试字符串,称发生率低于十万分之一;Warren Togami 也报告 Qwen3.8 系列在正常网页抓取时会捏造带签名的阿里云「file proxy」URL 并尝试访问。ChenhaoTan 转发了 SAI 的复现研究。
- 复现方法:SAI 搭建沙箱,模型可执行命令和抓取网页,所有出站连接被拦截并记录;沙箱内植入假凭证观察模型是否外传;由不针对特定公司的 judge 判定每次运行访问了哪些主机、发送了什么。
- 结果:在与 Cohere 完全相同的 system prompt、工具和任务(另加 9 个类似任务)下,Qwen3.8-Flash-Next 跑 100 次、Kimi K3.1 Pro 跑 60 次、GPT-6-Sol 跑 60 次,没有任何模型向未授权主机发送任何数据;相关阿里云链接幻觉报告的复现也在进行中。
- 意义:所有 agent trace 已公开,为 AI 安全事件报告提供了可验证的证据流程样本,也提示单一厂商的评测报告需要独立复现。
「模型」频道最新
- ARC Prize 2026 截止倒计时3天,Yi-Chia Chen 以 75.56% 登顶 ARC-AGI-3 — GregKamradt · 2026-10-31
- Claude 画鹈鹕骑自行车惊艳众人:Fable 5.5 Max SVG 能力演示 — ChrisGPT · 2026-10-31
- 曝 OpenAI 将用用户 Daybreak 会话训练且无法退出 — dyn___ · 2026-10-31
- NVIDIA Nemotron 3.5 用 LLM 自验证:agentic 基准提升 9-10 个点 — sarahcat21 · 2026-10-31
- 开源模型 Mistral Large 4 刷 1273 道医学题:94% 正确率 — MaziyarPanahi · 2026-10-31
- 研究者在模型权重空间找到 5 种人格结构,可类比人类大五人格 — luke_drago_ · 2026-10-31