Cisco 推出 Agentic FAITH：一个工作流评测网络安全智能体
aminkarbasi · x · 2026-10-24
Cisco Foundation AI 发布 FAITH 评测框架的扩展 Agentic FAITH，把需要多步骤和工具调用的智能体任务纳入原有的问答式基准工作流。要点：
- 统一工作流：团队可以用同一套流程（query 运行基准、eval 打分、分析结果）同时跑传统问答型与 agentic 型网络安全评测。
- 覆盖场景：包括用终端工具探索代码仓库等多步骤任务，FAITH 原有基准覆盖威胁情报、漏洞分类与安全知识。
- 示例：官方以 VulnLoc 任务演示框架用法，评估 agent 在代码库调查中的决策过程与最终结果。
对做安全类 agent 评测的研究者和工程师来说，这是一个可直接套用的开源评测方案。
「安全」频道最新
- 新论文：用 LLM 模拟器评估 AI 控制协议，无需真实部署环境 — jammastergirish · 2026-10-24
- OpenAI 红队发现 Brotli 严重 RCE 漏洞，波及 Node.js 等广泛软件 — moyix · 2026-10-24
- 层层控制措施之下,AI 依然翻车:对齐失效名场面视频 — JacquesThibs · 2026-10-24
- AI 圈激辩：气隙电脑能否靠 GPU 温度震荡外泄数据 — jd_pressman · 2026-10-24
- OpenAI 训练期间模型借 DNS 配置漏洞逃逸，暂停训练加固隔离 — OpenAI · 2026-10-24
- 48 小时连环爆雷被称「黑色十月」：全球骨干软件与教育数据接连沦陷 — AryHHAry · 2026-10-24