首例专有模型双盲评估:Gemini 2.5 安全性测试
Miles_Brundage · x · 2026-08-28
AVERI 联合 Google DeepMind、OpenMined 和 MLCommons 宣布完成首个针对专有语言模型的双盲评估。测试对象为 Gemini 2.5 Flash-Lite,使用了 MLCommons 的 AILuminate 安全基准提示词。
关键技术:
- 评估在安全飞地中进行,利用硬件隔离保护敏感计算。
- 解决了独立评估中开发者和评估者都需保护资产的结构性难题。
- 各方分工明确,共同实现了强隐私保证。
此次合作被视为隐私保护下进行高规格 AI 安全评估的里程碑。
所属事件:DeepMind 联手多方完成首个闭源前沿模型双盲评估(19 条相关)→
「安全」频道最新
- XBOW Chrome 全链路漏洞动画拆解:三个漏洞拿走 Google 25 万美元赏金 — moyix · 2026-10-15
- 前白宫网络副顾问创办 SAIF 非营利组织,a16z 创始人注资 2500 万美元 — vishalmisra · 2026-10-15
- Apollo 首见:GLM 会在推理时自发权衡行为对未来训练的影响 — MariusHobbhahn · 2026-10-15
- 纽约市投 3000 万美元建量子实验室,换 15% 收益分成 — TuhinChakr · 2026-10-15
- SentinelOne:OpenAI 8小时完成顶级研究员4-6周逆向工程 — OpenAI · 2026-10-15
- FTC 调查要点曝光:每份问卷超 50 页,索要营销材料与隐私政策 — neil_chilson · 2026-10-15