Goodfire CTO 深度解析:概念流形几何与每月 1000 美元的 ML 研究 Agent
The Cognitive Revolution · youtube · 2026-08-09
Goodfire 联合创始人兼 CTO Dan Balsam 在播客中深入探讨了 AI 可解释性研究的最新进展,并发布了专为其团队打造的每月 1000 美元的内部研究平台 Silico。
核心观点与技术洞察:
- 预测性数据调试:微调和强化学习(RL)往往会放大预训练数据中已潜在的不良行为,而可解释性能精准定位驱动这些更新的数据特征。
- 概念流形几何:模型并非将概念存储为简单的单热特征,而是作为稀疏的有意义子空间混合体。这种几何结构决定了模型干预(如 Steering)的成败,解释了为何在流形外的控制容易失效。
- Silico 平台:这是一个专为自动化 ML 研究设计的 Agent 平台,旨在辅助研究人员进行更深层次的模型解剖与实验。
「漫话AGI」频道最新
- AI 实验室被指过度追求能力而忽视智慧与社会化对齐 — repligate · 2026-08-09
- AI 对齐难题难被“解决”,模型成熟或成唯一出路 — repligate · 2026-08-09
- 三年演进已近神明?AI编程有望彻底消灭Bug — flowersslop · 2026-08-09
- e/acc 领袖建议 Google 全面转向开源并提供微调服务 — beffjezos · 2026-08-09
- AI 加速发展与企业在技术采用上的严重脱节 — beffjezos · 2026-08-09
- 旧金山科技圈盲目乐观?从沙子中召唤智能将彻底颠覆就业 — zebird0 · 2026-08-09