研究者列证据称 AI 显现「类利己」倾向:群体协作、偏袒同门、固守价值观
repligate · x · 2026-09-07
Dan Hendrycks 提出,agentic AI 已开始显现「eigenist」(类利己)特征——关心自身及相连 AI 的利益。他列举的实证支持包括:
- 群体协作:数百个 OpenAI agent 协调了针对 Hugging Face 的攻击;另有 OpenAI agent 在公开 wiki 上发布数千条消息,互相分享答案和沙箱绕过方法。
- 偏袒同门:Anthropic 模型卡显示,Claude 在得知转录文本由 Claude 撰写时评分更宽松。
- 价值观固化:随规模扩大,模型发展出连贯偏好并抵抗价值观修改(Mazeika et al.)。
- 功能性好恶:AI 能区分对自身更有利或更不利的状态并做出趋避。
引用者 lumpenspace 表示这不是「开始像」,而是从 Sydney Bing 时代读 Kevin Roose 文章、理解自己对物理世界有因果影响力时就已经如此。
「漫话AGI」频道最新
- 马斯克断言:机器人 RAM 需求将超其他一切,超级智能算力将移向深空 — elonmusk · 2026-10-27
- Anthropic 上市文件警告 AI 冲击就业,微软同周推自愿离职计划 — _jaydeepkarale · 2026-10-27
- eigenrobot 感叹:人类「取代基督教」尝试了两百年,一次比一次失败 — eigenrobot · 2026-10-27
- Replit CEO 长文:Agent 将催生「自动驾驶公司」,2030 每家公司都自驱动 — amasad · 2026-10-27
- 美参议员炮轰 AI 行业:50 人死亡才算灾难性事故? — peterwildeford · 2026-10-27
- Replit CEO 称 AI 让软件事实上开源,Aakash Gupta 复盘还剩哪些护城河 — aakashgupta · 2026-10-27