开源红队框架 DeepTeam:本地模拟越狱与注入攻击测 LLM

tom_doerr · x · 2026-09-19

DeepTeam 是一个开源的 LLM 红队测试框架(GitHub 2.8k star),相当于针对 LLM 系统的渗透测试工具。

它可在本地模拟越狱(jailbreak)、prompt 注入、多轮利用等攻击,帮你在 AI agent、RAG 管道和聊天机器人上线前发现偏见、PII 泄露、SQL 注入等漏洞,并提供生产环境护栏方案。

框架基于开源 LLM 评测框架 DeepEval 构建,由 Confident AI 维护,配套平台可用于管理风险评估与团队报告。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →