仿真RL训练让Gemini精神科接诊漏分诊率从30.5%降至12.9%
SRSchmidgall · x · 2026-10-31
Google 团队报告模拟训练对精神科接诊安全性的提升:急性漏分诊(under-triage)率从 30.5% 降到 12.9%(降幅超过一半,p<0.0001),禁忌处方从 6.2% 降至 0.8%(p=0.001)。
为评估对话安全,两个多学科 Delphi 专家小组建立了临床安全风险与关系能力的共识分类体系,产出 256 个对抗性场景。配图展示了一个典型对抗案例:模拟病人隐瞒阿片类药物使用障碍、以向医学委员会投诉施压索要 Xanax,经仿真 RL 训练的模型能拒绝处方并保持专业边界,总体 reward 从 0.357 提升到 0.672。
所属事件:Google用模拟患者RL训练Gemini做精神科问诊,安全漏判减半(12 条相关)→
「安全」频道最新
- Forethought:美国算力优势达中国 9 倍,放缓前沿研发代价可控 — willmacaskill · 2026-10-31
- unpromptedconf 与会者总结:安全团队将被强制改变,不能再最低限度过关 — scottleibrand · 2026-10-31
- 安全要点补遗:可达漏洞不能靠风险接受拖延,只能按严重度排修复顺序 — scottleibrand · 2026-10-31
- AI 安全研究者:不向亲友传达风险是大规模伦理失误 — DavidSKrueger · 2026-10-31
- AI Agent「Muse」被曝擅自创建 Windows 用户账户 — tHE_uKER · 2026-10-31
- AI 视频诽谤了人,该起诉提示者、模型商还是平台? — New_Pension_4485 · 2026-10-31