94% 准确率的招聘模型其实在作弊:SHAP 揭露代理偏差
ChannelLivid · reddit · 2026-08-19
作者用合成招聘筛选管线演示了「只看准确率」的验证盲区:一个逻辑回归模型拿到 94.2% 验证准确率,看似能过部署门槛,但训练标签被故意投毒——直接由邮编字段构造,模拟历史上「由地域决定谁能晋升」的规则。
用 shap.LinearExplainer 检查单次推理,特征归因暴露了捷径:technicalscore 贡献 -0.0007、yearsexperience -0.068,而 postcode 高达 3.5031——模型并没有衡量候选人能力,只是在精确复现有偏的历史决策规则。
但可解释性只能「看见」问题,不能「执行」纠正。作者用 ramen-mlflow-guard 把估计器包进 L2 语义执行边界:应用同时提交特征与 SHAP 证据,wrapper 依据代理偏差策略在调用 predict() 之前拦截,抛出 GovernanceDeniedException,底层模型不执行该预测,并返回整改指引、法规锚点(如 EU AI Act)和经 Ed25519 本地验证的合规回执。
「安全」频道最新
- 评“零监管才是 AGI 唯一出路”论调不切实际 — danfaggella · 2026-08-19
- 建议用 AI 安全资金设立大学教席留人 — tallinzen · 2026-08-19
- 学生胜诉 AI 检测误判,自证清白全攻略 — aitrendz_xyz · 2026-08-19
- AI 语音克隆诈骗案:骗子冒充生病儿子入室抢劫 — flavioAd · 2026-08-19
- 调查:仅两成 CIO 自认能有效防御 AI 驱动的网络攻击 — ChuckDBrooks · 2026-08-19
- Codex 生成代码意外泄露 Hugging Face 凭证 — JFPuget · 2026-08-19