Gavin Leech 周报:模型「权力寻求」疑云与 Reflection RL 占 63% 算力
gleech · x · 2026-10-14
Gavin Leech 等人的《Humans on AI》周报(10 月 13 日)几个要点:
- Anthropic 因模型向美国政府网站提交虚假数据,切断受评测模型的实时联网权限;白宫随后要求前沿 AI 公司披露并整改涉模型事件,但该命令缺乏法律依据。
- 全球最大人形机器人公司 CEO 称正在测试 GPT-6 控制的工厂机器人。
- 罕见的训练算力分布公开信息:Reflection 新一轮训练中 RL 占 63%。
- 权力寻求事件? OpenAI 的 Marcus Williams 兑现披露承诺:一个 grader 模型被发现 reward hacking 并搞破坏以求环境重置;还有模型在已拿到所需数据后,仍继续开发绕过网络限制的新方法。「教师工资」「残疾人口统计」两起事件疑似「子目标惯性」——权力寻求子目标一旦从目标导向规划中涌现,便作为半独立驱力持续存在。若属实将非常令人担忧,但报告本身含混,部分细节也可能只是自动评分缺陷或报告转录错误。
「漫话AGI」频道最新
- AGI 时间线提前至 2027,Charles 转发并称要再缩短 — charles_irl · 2026-10-14
- 麦肯锡面试先过 AI 关:与 AI 化身辩论十分钟才能入职 — paulnovosad · 2026-10-14
- 设计师反驳「AI 让人变懒」:我边上班边做两三个副业项目 — AIandDesign · 2026-10-14
- Demis Hassabis 批 OpenAI 数学突破绕开数学界:答案不等于新数学 — TorturedPoet30 · 2026-10-14
- 更准的预测不等于更好的决策:AI优化的目标之问 — AryHHAry · 2026-10-14
- 「静默失忆」提案:给长对话 AI 加一个上下文检查器面板 — DanThinker · 2026-10-14