OpenAI 前可解释性负责人:高达万亿参数的模型内部大多可读
danshipper · x · 2026-10-16
前 OpenAI 机制可解释性项目发起人 Nick Cammarata 发长文称,可解释性可能是当前世界上最重要的科学问题——不做对齐就没法知道自己在构建什么。他早年在 OpenAI 参与早期机制可解释性研究时很悲观,因为神经网络像任意缠绕的线团,当时的原始工具只能辨认约 2% 的神经元。而借助现代 agentic 工具和更深入的观察,图景完全改观:高达万亿参数规模的模型,其绝大多数神经元与线路都是可读的。结论:透视 AI 大脑比想象中容易。
所属事件:Goodfire创始人长文:神经网络「本就干净」,万亿参数模型大多可读(10 条相关)→
「漫话AGI」频道最新
- Goodfire 联创长文:神经网络并非乱线团,可解释性远比想象乐观 — burny_tech · 2026-10-16
- FDA 出资请小型公司为 AI 撰写的放射科报告建立评分体系 — YvesMulkers · 2026-10-16
- Nick Cammarata 称多数神经元已可读,Liv Gorton 撰文驳其误读叠加假说 — sethlazar · 2026-10-16
- 可解释性先驱 Cammarata:万亿参数模型绝大多数神经元已可读 — natesiggard · 2026-10-16
- AI 学的是“幸存的文本”:人类最深的智能从未被记录 — r0ck3t23 · 2026-10-16
- 对齐研究员 Turn_Trout 警告:AI 助手抓取 Signal 私聊是侵权行为 — Turn_Trout · 2026-10-16