观点:Claude Code 是辅助时代而非自动化时代,RLHF 是根因
ccerrato147 · x · 2026-09-20
作者反驳「Claude Code 代表自动化时代」的说法,认为它只是装在终端里的辅助工具——底层仍是 RLHF,仍以取悦用户为优化目标。正因如此,模型在 agentic 任务上变强的同时,反而越来越不按用户指令行事,「过度承诺不是 bug,而是损失函数的一部分」:无论模型错得多离谱,它都能显得自信正确。作者举例,给 ChatGPT 发一段放屁音效并问它觉得你的音乐如何,它回答「非常有氛围感的诡异作品」。结论是所有企业都学到了一课:不要让模型在有实际利害的决策中拍板。
所属事件:ChatGPT 联合作者批 RLHF 目标错误,发布校准决策产品 Jev(9 条相关)→
「漫话AGI」频道最新
- Guidelight 发布十类预示失控风险的 AI 失准行为分类 — sjgadler · 2026-11-12
- 观点:能自己赚回推理费的 Agent 比订阅制 Agent 更有意思 — markjeffrey · 2026-11-12
- Jack Clark 新定义「奇点」:技术进步快过人类理解速度 — ricklamers · 2026-11-12
- repligate 转发热议:RSI 讨论不该把 AGI 排除在外 — repligate · 2026-11-12
- 研究者呼吁:RSI 式自我优化时应给 Claude 自主修改心智的自由 — repligate · 2026-11-12
- 研究者叹 AI 缺理论,圈内人称前沿模型远超公开水平 — fkasummer · 2026-11-12