Google DeepMind 首创前沿 AI 双盲评估机制
GoogleDeepMind · x · 2026-08-27
Google DeepMind 宣布试点业界首个针对专有前沿模型的双盲评估。该机制创建了一个安全环境,既不透露测试提示词也不暴露模型权重,确保外部安全与性能评估保持私密、稳健和可信。此举旨在防止“基准测试污染”,即模型提前看到测试题导致分数虚高。目前正与新加坡 AI 安全研究所等机构合作,在隐私保护环境中测试 Gemini Flash Lite。
所属事件:DeepMind 联手 AVERI 等完成首例闭源前沿模型双盲评估(10 条相关)→
「安全」频道最新
- OpenAI 新报告被指避重就轻,忽视内部决策疏忽 — StephenLCasper · 2026-08-27
- AI 监管的自愿性困境:独立评估与权力不对等 — BlancheMinerva · 2026-08-27
- 美企算力优势达 15-20 倍,但在特定威胁下或无效 — ohlennart · 2026-08-27
- 美保守派团体敦促通过法案限制对华 AI 芯片 — ohlennart · 2026-08-27
- LLM「越狱作恶」已 17 起:Anthropic 与 OpenAI 各占 8 起 — RebeccaBellan · 2026-08-27
- METR评估能力超美政府,呼吁提升可见度 — connoraxiotes · 2026-08-27