专题 · FULL STORY
AI 2040预测发布即遭学界强烈质疑
Daniel Kokotajlo 团队发布《AI 2040》提出超级智能积极愿景,但随即引发社区与学者对线性外推逻辑的批评。多位学者尖锐质疑其模型能力与实际风险脱节及末日论假设。
2026-07-10 ~ 2026-07-14 · 5 集 · 67 条
第 1 集 · AI 2027 团队发布《AI 2040》愿景推演(2026-07-10,40 条)
7月10日,曾撰写《AI 2027》的研究员 Daniel Kokotajlo、Ryan Greenblatt 等人发布了最新报告《AI 2040》。该报告旨在探讨人工智能的长期社会后果,并针对此前预测的“AI接管世界或权力不可逆集中”的灾难情景,提出了一个更积极的替代愿景。作者 Kokotajlo 表示,这仅是当前最好的猜测,希望能在为时已晚前激发出更优方案。
核心情景与技术预测
报告包含多套推演方案。其中“Plan A”设定了一个顺利推进的情景:中美在2029年达成协议以避免失控竞赛,促使AI研发放缓与透明度提高,并在2033年产生“公民分红”。技术方面,报告预测2028年左右可能出现100T参数级别的模型。然而作者团队认为,在所有方案中,通往通用人工智能(ASI)的竞赛路径(Plan D)才是最可能发生的现实结果。
治理建议与争议
在治理层面,《AI 2040》明确反对公开发布前沿开源权重模型,理由是高能力模型可能被用于设计灾难性生物武器。此外,报告还提到了高增长AI情景下数据中心对能源系统的巨大影响。
各方反应
该报告引发了AI安全与治理圈的热议。Miles Brundage 肯定了其情景推演的价值,但表示自己更倾向于“AI界的CERN”方案,并认为报告对AI自动化的时间线预测偏保守。Scott Alexander 等人发布了面向普通读者的入门解释以帮助传播。与此同时,Sebastian Krier 等评论者提出了质疑,认为该报告描绘的未来图景暴露出AI安全界存在严重的“单一文化问题”。
- AI 2040提出更积极愿景 — DKokotajlo · 2026-07-10
- AI 2040计划A只是当前猜想 — DKokotajlo · 2026-07-10
- AI 2040计划提出:通过验证技术放缓AI发展 — thlarsen · 2026-07-10
- AI 2027 团队发布 2040 新预测场景 — daniel_mac8 · 2026-07-10
- AI 2040计划:构建安全透明的AGI愿景 — eli_lifland · 2026-07-10
- AI 2027作者发布AI 2040计划 — manubfr · 2026-07-10
- AI2040设想公民分红 — ChrissGPT · 2026-07-10
- AI 2040:顺利推进的情景推演 — AndyMasley · 2026-07-10
- AI 2040 引用的能源影响讨论 — AndyMasley · 2026-07-10
- AI预言家发布《AI 2040:计划A》愿景 — peterwildeford · 2026-07-10
- Plan A延续AI 2027讨论 — slatestarcodex · 2026-07-10
- AI 2040 的乐观路线图 — Leonhard27 · 2026-07-10
- AI 2040 场景转向降温叙事 — thlarsen · 2026-07-10
- AI 2040发布引关注 — kimmonismus · 2026-07-10
- AI 2040 博客发布 — kimmonismus · 2026-07-10
- 如何面对比人类更强的 AI — RyanGreenblatt · 2026-07-10
- AI 2040 的“Plan A”在讨论什么 — AIExplainedYT · 2026-07-10
- AI 2027 默认时间线未大改 — DKokotajlo · 2026-07-10
- AI2040预测百T模型 — scaling01 · 2026-07-10
- AI 2040的正向未来路线图 — austinc3301 · 2026-07-10
第 2 集 · AI治理方案《Plan A》引发超级智能风险与协调热议(2026-07-10,16 条)
近期,多位AI安全领域专家围绕一份名为《Plan A》(或称《AI 2040: Plan A》)的治理方案展开深入探讨。该方案旨在应对《AI 2027》等预测中提及的超级智能(ASI)可能夺取世界或引发权力不可逆集中的风险,主张通过大国协调和“经验证的放缓”来推迟智能爆炸的时间线,引发了业界对AI未来发展与监管路径的广泛关注。
核心机制与干预手段
《Plan A》的核心目标是争取时间,将原本可能在2030年代末到来的ASI起飞推迟至2040年。为实现这一目标,@JeffLadish等人指出方案建议在所有主要数据中心嵌入监测基础设施,以便美国、中国等大国能够进行互相核验,从而达成类似军控式的协议。此外,@DKokotajlo强调了“完全研究透明”在超级智能时代的重要性,认为提升透明度是防止权力过度集中、应对未来AI深度融入经济与军事的关键干预措施。
各方反应与路线争议
该方案被@JeffLadish等人评价为目前见过最系统、最周全的超级智能应对方案之一。@elilifland将其与满速推进的Plan C/D、类似国有化的Plan B进行对比,认为“经验证的放缓”是当前最不坏的选项。然而,方案也面临诸多质疑。@sebkrier指出,该方案对监管合作、算力追踪等机制的设想缺乏具体实现路径,不能理所当然地假设高度合作且稳定的监管秩序会自然成立。此外,@AdrienLE提到的“dry tinder(易燃物)”争议指出,放缓可能导致巨大的算力与算法“过剩”累积,一旦失控反而可能显著加速智能爆炸。@JeffLadish也承认,随着技术进步,秘密数据中心和未追踪芯片的部署会越来越容易,这给监管带来了巨大挑战。
- 该如何应对 AI 未来 — JeffLadish · 2026-07-10
- Plan A谈放缓超级智能竞赛 — austinc3301 · 2026-07-10
- Plan A被称为超级智能应对方案 — JeffLadish · 2026-07-10
- 一套应对强大AI的方案 — JeffLadish · 2026-07-10
- 在大数据中心嵌入监测机制 — JeffLadish · 2026-07-10
- 超人 AI 也可走军控式协议 — JeffLadish · 2026-07-10
- 秘密数据中心会让监管更难 — JeffLadish · 2026-07-10
- 延缓 AGI 时间线仍然必要 — JeffLadish · 2026-07-10
- 用数据中心监测推迟智能爆炸 — JeffLadish · 2026-07-10
- 协调 AI 治理优于默认路径 — JeffLadish · 2026-07-10
- 探讨中美AI协调与ASI风险应对 — JeffLadish · 2026-07-10
- AI 2040 的治理设想遭质疑 — sebkrier · 2026-07-10
- Plan A 的算力过剩风险争议 — AdrienLE · 2026-07-10
- 超智能时代为何重视研究透明度 — DKokotajlo · 2026-07-11
- 超级AI时代的权力结构与透明度干预 — DKokotajlo · 2026-07-11
- AI 放缓路线之争 — eli_lifland · 2026-07-11
第 3 集 · 超级智能预测引发认知分歧与线性外推质疑(2026-07-10,4 条)
围绕“AI 2040”的预测,社区内部出现了深层的认知分歧。一派认为超级智能意味着近乎全能,而另一派则对此表示强烈质疑。批评者指出,很多人倾向于将大模型参数或某个特定领域的能力进行线性外推,却严重低估了社会、工作和文化等复杂因素的制约。这种对全能性的盲目直觉,使得有意义的讨论变得困难。
- 质疑大模型参数线性外推 — teortaxesTex · 2026-07-10
- 讨论超级智能近乎全能的认知鸿沟 — binarybits · 2026-07-11
- 超级智能引发深层认知分歧 — binarybits · 2026-07-11
- AI 2040 预测不能线性外推 — Dan_Jeffries1 · 2026-07-12
第 4 集 · 学者质疑AI末日论与技术放缓假设(2026-07-12,3 条)
近期多位学者对流行的「AI 2040」末日情景预测及其论证逻辑提出尖锐质疑。他们指出,METR 的时间线推演存在缺陷,例如模型能力与实际自动化风险脱节。此外,所谓的技术放缓假设也遭到反驳,评论认为若放缓未发生,当前的安全策略可能失效,呼吁大众不应盲目买单此类末日叙事。
- 对 AI 2040 放缓叙事的质疑 — EigenGender · 2026-07-12
- 学者质疑METR模型能力预测与AI末日论 — joshua_saxe · 2026-07-13
- 质疑AI2040的末日推演 — repligate · 2026-07-13
第 5 集 · AI安全被视为认知与制度的紧急状态(2026-07-12,4 条)
近期关于AI 2040/2027的讨论提出核心判断:AI安全不仅是政策问题,更是一场“认知紧急状态”与认识论危机。面对AI带来的风险与机遇,社会不能仅停留在预测式叙事,而是迫切需要建立能够持续观察、判断、决策并采取行动的专门机构与制度体系,以应对信息层面的挑战。
- AI安全也是认知紧急事件 — sebkrier · 2026-07-12
- AI安全不仅是政策问题 — sebkrier · 2026-07-12
- AI安全首先是制度问题 — joshua_saxe · 2026-07-13
- AI安全不只是政策问题 — joshua_saxe · 2026-07-14