18 年过去:模型能力垂直起飞,自保等「工具性驱力」却始终未现
banteg · x · 2026-09-15
banteg 引用一篇文章后指出一个令人宽慰的观察:AI 能力在垂直起飞,但「自主动机」基本没有跟上。2008 年的 "The Basic AI Drives" 论文预测,足够强大的系统会倾向于自我保存、获取资源、自我改进等工具性驱力;18 年过去,模型在各方面持续变强,这些驱力却完全没有显现。
被引用的原文则试图拆解人们对 AI 的核心恐惧——「如果我失去控制,我就会死」——并论证人类作为一个整体其实从未真正处于控制之中,世界是异质的、既有对抗也有协作的集合体,安全讨论常回避这一点。
「漫话AGI」频道最新
- AI 从业者吐槽:喊灭绝风险的人自己还在加速造 AI — suchenzang · 2026-09-15
- Greg Brockman:OpenAI 调 25% 产研工程师用 AI 找漏洞直至枯竭 — basedjensen · 2026-09-15
- 用量化金融类比 AI 竞赛:大厂先发优势终将随算法公开而消散 — willcb · 2026-09-15
- 每 3 名 NEET 青年仅对应 1 个入门级岗位,就业结构引担忧 — jgvfwstone · 2026-09-15
- Reddit 热议:比起 p(doom),我们更需要一个 p(despair) — LongIslandSmedium · 2026-09-15
- Noam Brown:OpenAI 最高研究优先级是递归自我改进 — jessi_cata · 2026-09-15