安全研究者实测:prompt injection 检测评测集标签错误严重
知名开源安全工具作者 evilsocket 对用于评估 prompt injection 检测的主流数据集之一进行了实测检查,发现标签质量堪忧、错误严重。他批评 AI 时代许多人忽略了基本的数据分析与 QA,并表示越深入审查各类 benchmark 背后的数据,越不信任 benchmark 本身以及用其推广产品的人。
2026-10-09 ~ 2026-10-10 · 2 条相关
- evilsocket 实查 prompt injection 主流评测集:标注质量堪忧 — evilsocket · 2026-10-09
- 安全研究者实测:主流 prompt injection 检测数据集标签错得离谱 — evilsocket · 2026-10-10