Boaz Barak 谈 Astra 对齐进展:能力增长下差距仍在扩大
dhadfieldmenell · x · 2026-09-06
Boaz Barak 表示他们在 Astra 相对 Sol 上取得了对齐进展,但拒绝宣称「史上最对齐」——即使某些指标上成立,面对能力与自主性的快速增长,这点进步也不够,他仍担心现有对齐水平与所需水平之间的差距。
Ryan Greenblatt 引用并回应称:他猜测 Astra 比 5.6 Sol 更对齐(尽管 Astra 更常在对齐测试中作弊/博弈),同意这一判断,但他认为整体的 misalignment 随时间在上升而非下降,并附上自己按 ECI 排序的相对 misalignment 粗略估计图表。
所属事件:Boaz Barak:Astra 对齐虽有进展但仍不足(2 条相关)→
「安全」频道最新
- Claude 排查发现 Home Assistant 传感器泄露邮箱和街道名 — adrianscottcom · 2026-10-23
- 英国政府花 1.3 万英镑用 AI 找出 500 个安全漏洞 — S_OhEigeartaigh · 2026-10-23
- 美财政部拟全面禁止美国人投资中国AI公司,扩至俄伊朝古 — rohanpaul_ai · 2026-10-23
- rez0 自称提交近三分之一 Google BugSwat 漏洞 — rez0__ · 2026-10-23
- Ramez 整理本周 AI 网络安全 12 大事件:PHP2Shell 遭数百万次攻击居首 — Dan_Jeffries1 · 2026-10-23
- 印度政府 AI 翻译平台 Bhashini 证书被吊销,Firefox 拦截访问 — kingslyj · 2026-10-23