DeepSeek 网安实测：召回率登顶但精度垫底
teortaxesTex · x · 2026-08-13
在最新网络安全漏洞挖掘基准测试中，DeepSeek 展现了极高的召回率但伴随严重的精度问题。
- 召回率登顶：在 pass@3 设置下，DeepSeek 成功发现了 87.5% 的基准 CVE 漏洞，超越了 Opus 5 和 Qwen 3.8。
- 精度垫底：其报告的有效漏洞率仅为 65.6%，远低于 GPT-5.6-Sol 的 86.4%，存在大量误报。
- 稳定性差：单次运行表现波动大，平均仅能发现 58.3% 的漏洞，需多次运行合并结果才能发挥最大效用。
对此，有社区开发者指出，该模型单次运行收益波动大且误报率高，核心原因在于其仍处于“后训练不足”的状态。
所属事件:DeepSeek V4 Pro 发布后被疑发错版下架(18 条相关)→
「模型」频道最新
- 预测:AI 用量持续增长,前沿模型收入增速却可能放缓 — yi111 · 2026-10-16
- Nolla Health 后训练 Nemotron 3.5：视觉诊断准确率 35% 升至 66.8% — LoganGrasby · 2026-10-16
- 开发者:除顶尖专家外,编码模型在软件各领域已全面超越人类 — zack_overflow · 2026-10-16
- 爆料预测:中国前沿模型或 2027 年 3 月追平 GPT-6 级别 — teortaxesTex · 2026-10-16
- Liquid AI 决策模型 d1-ultra 上线 Vercel AI Gateway — JosephJacks_ · 2026-10-16
- DeepLearningAI 周报:Haiku 5.5 降价九成、Gemini 4 Argon 输出上限升至 1M — DeepLearningAI · 2026-10-16