前沿大厂网络安全评测用 SEC-Bench Pro:183 个真实漏洞考 agent 写 PoC
NielsRogge · x · 2026-11-03
Niels Rogge 介绍,Google、DeepSeek、OpenAI 等前沿实验室现在报告的网络安全评测之一是 SEC-Bench Pro,由 @hwiwonl 创建,包含 V8 与 SpiderMonkey JavaScript 引擎中的 183 个真实漏洞。任务要求 agent 在没有原始 PoC 或补丁的情况下,自行编写触发每个漏洞的概念验证代码。引用的榜单显示 Gemini 4 Carbon 以 88.2% 领先 GPT-6 Astra 的 85.4%,GPT-6.1 Terra(83.3%)和 GPT-6.1 Sol(78.8%)更低。
「模型」频道最新
- Skyfall AI 发布世界模型 SKY-001,CAD 精度追平 GPT-6 成本仅 1/150 — rohanpaul_ai · 2026-11-03
- pplx-embed-v2 上下文版实测:0.6B 也能跨 chunk 关联产品 — tomaarsen · 2026-11-03
- 暗榜现「Pulse Alpha」,分词器指向智谱 GLM 5.5 — Dany0 · 2026-11-03
- 开源土耳其 ASR「balbal-v2」:CPU 跑 236 倍速,Mu-Bench 仅次于 Chirp 3 — Shadomia · 2026-11-03
- 网传 GPT-6.2 Astra 鹈鹕骑车图被指细节疯狂,评论者质疑真实性 — teortaxesTex · 2026-11-03
- OpenAI 数学成果落地:722 篇论文与 88 小时证明改写专家角色 — shashib · 2026-11-03