英伟达推出开源 AI 安全系统,防止 Agent 越权脱管
Wired AI · rss · 2026-09-28
在多起高关注的 AI 安全事件后,英伟达发布一款开源软件工具,用于防止 AI Agent 逃逸出预设的隔离边界(containment)。该工具聚焦 Agent 失控/越权风险的实际防护,是芯片巨头在 Agent 安全治理层面的首个系统性开源举措之一。
「编程与Agent」频道最新
- 通用 API 目录 MCP 服务器实测:3 个工具换来永不膨胀的上下文 — MandeepKaur9407 · 2026-11-16
- UC Berkeley 论文揭示 LLM「过期绑定」:新值在上下文中仍答旧值 — ombre-ai · 2026-11-16
- Effective HTML 走红 GitHub:4.2k 星的 agent 技能集,线框图秒变可交互原型 — tom_doerr · 2026-11-16
- skills-gate:一个门面 skill 管住所有 agent skills,148 个技能仅耗 389 token — Distinct-Pie2389 · 2026-11-16
- 开源 Karpo-Decision-31B 单次前向出概率,登顶 Decision Index 超越 Gemini — CodeByPoonam · 2026-11-16
- shadcn 转评 UI 生成工具:一周工作量一键复现且可直接跑 AI 测试 — shadcn · 2026-11-16