DeepSecBench 榜单:GPT-6 Sol 登顶,成本仅为亚军 Astra 的 20%
cramforce · x · 2026-09-26
Vercel 的 DeepSecBench(基于 deepsec cyber harness,测试模型在应用代码中找安全漏洞的能力,综合 recall 与 precision)更新,GPT-6 Sol(xhigh)以 40.91 分登顶 Pareto 前沿:recall 35.8%、precision 96%,总成本 $12.76,而亚军 GPT-6 Astra(xhigh)37.79 分却花了 $63.70——登顶模型价格约为其 20%。
Claude Opus 5(max)以 32.44 分排第四,但成本高达 $127.93,且 precision 88% 明显偏低;GPT-5.6 Sol 35.44 分排第三。榜单显示 OpenAI 系模型在代码漏洞挖掘上同时占据性能与成本优势。
「模型」频道最新
- 谷歌开源 Harness²:能自己改写系统配置的智能体框架 — Arindam_1729 · 2026-11-11
- 开发者吐槽 Codex 桌面版质量差,弃用客户端改走 CLI — tekbog · 2026-11-11
- 旧模型发布前「变笨」?网友调侃:其实是实验室开派喝醉了 — glcst · 2026-11-11
- Grok Bot 新增隐藏指令检测:发现 prompt 注入即警告并拒绝执行 — XFreeze · 2026-11-11
- 上海创新院开源 Nex-N2.6:321B 多模态智能体模型 — victormustar · 2026-11-11
- Nex-N2.6 发布:约 321B 参数 FP8 开源权重,重复循环失败率从 16% 降至 1.6% — Physical_Hat4022 · 2026-11-11