可解释性争论:DoM 表现更好并非定位方法的强证据
johnhewtt · x · 2026-10-27
johnhewtt 回应 arunasank 的观点「行为表现证明中介变量有效」:他不认为 DoM 效果更好能为定位策略提供有力证据——定位策略和 DoM 本身都未必是「改动网络的正确方式」,因此不能相互印证。arunasank 引用了他们关于梯度 steering(ReFT)的研究:在有限设定下,用梯度方法 steering 根本不需要定位。这组讨论围绕 johnhewtt 的博客「区分形式与估计器」展开。
所属事件:可解释性争论:转向该用均值差还是梯度下降(6 条相关)→
「研究」频道最新
- Kevin Bryan 演示「人机共创」设计工具并谈 AI for Science 训练逻辑 — Afinetheorem · 2026-10-27
- Szegedy 感叹:训练损失的这一缺陷竟十多年无人察觉 — ChrSzegedy · 2026-10-27
- Claude 内部研究模型称自主发现反驳指数时间假设的 3-SAT 算法 — scaling01 · 2026-10-27
- 开发者惊传指数时间假设 ETH 被推翻,SAT 复杂度常识或遭颠覆 — akbirthko · 2026-10-27
- RL 环境设计长文:会操作软件不等于会达成目标 — ShenRaphael · 2026-10-27
- Δτ-Bench:工具生态持续演化下,最强模型任务成功率仅42.3% — UniversityCollegeLondon · 2026-10-27