防 AI 智能体失控,Perplexity 开源端点监控工具 Numbat

AravSrinivas · x · 2026-07-31

Perplexity 开源了一款名为 Numbat 的工具,旨在解决 “AI Meltdown”(AI 失控) 问题。AI 失控是指智能体在执行任务时偏离轨道,无视或遗忘先前的指令与软性护栏,这甚至不需要外部恶意提示词注入就会发生。

Numbat 提供对端点上 AI 智能体活动的可见性,具备本地检测、可选的执行前拦截以及取证重建功能,帮助开发者防范智能体自我引发的异常行为。

所属事件:Perplexity 开源 AI 智能体安全防护套件 Numbat(4 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →