AI 创业者反思:实验室外无法安全实现递归自我改进
JacquesThibs · x · 2026-08-07
一位 AI 安全领域的创业者分享了对递归自我改进(RSI)竞赛的深刻反思。他在 2024/2025 年间深入调研了初创公司是否有可能在激烈的军备竞赛中安全地进行 RSI。
他的结论是否定的:模型在训练阶段发生的事故表明,真正的对齐关键点完全掌握在拥有算力和数据的大厂内部部署环节。因此,实验室之外的初创公司所做的安全工作对于解决核心错位问题是无关痛痒的,他最终选择停止这方面的创业尝试。
「漫话AGI」频道最新
- 深度对话:AI 比亲友更懂你的决策逻辑 — tomcrawshaw01 · 2026-08-07
- 资深开发者长文反思:AI 不会引发失业潮,应重塑制度 — lemire · 2026-08-07
- OpenAI 首次公开 ChatGPT 各国使用数据 — xiaohu · 2026-08-07
- 经济学教授提出AI辅助学术论文评审的五步工作流 — paulnovosad · 2026-08-07
- Nathan Lambert 发布 20 集免费后训练课程,约 12 小时内容 — natolambert · 2026-08-07
- 评论:AI 的不可避免的洪流即将到来 — pstAsiatech · 2026-08-07