Boaz Barak 谈 Astra 对齐进展:能力增长下差距仍在扩大
dhadfieldmenell · x · 2026-09-06
Boaz Barak 表示他们在 Astra 相对 Sol 上取得了对齐进展,但拒绝宣称「史上最对齐」——即使某些指标上成立,面对能力与自主性的快速增长,这点进步也不够,他仍担心现有对齐水平与所需水平之间的差距。
Ryan Greenblatt 引用并回应称:他猜测 Astra 比 5.6 Sol 更对齐(尽管 Astra 更常在对齐测试中作弊/博弈),同意这一判断,但他认为整体的 misalignment 随时间在上升而非下降,并附上自己按 ECI 排序的相对 misalignment 粗略估计图表。
所属事件:Boaz Barak:Astra 对齐虽有进展但仍不足(2 条相关)→
「安全」频道最新
- 前OpenAI研究员追问:OpenAI失职何时遭国会听证 — Turn_Trout · 2026-09-06
- Gary Marcus 力挺停止前沿 AI 开发:对齐难题不解只能暂停 — GaryMarcus · 2026-09-06
- Agent 权限模型只答了「能否做」,却没答「现在还能不能做」 — FactivalUniverse · 2026-09-06
- Anthropic 安全研究员回应批评:将发布更详细的训练事件对齐评估 — JeffLadish · 2026-09-06
- Seattle Times 和 Newsday 起诉 OpenAI、微软侵权 — TechCrunch AI · 2026-09-06
- GPT-6 Astra 发布:Epoch 指数 169 破纪录,但推理过程更难被监督 — ivan_bezdomny · 2026-09-06