研究者提出按「电路上下文」找相似激活的新可解释性思路
Sauers_ · x · 2026-10-21
作者提出一个可解释性研究设想:与其只看神经元在哪些文本上激活,不如寻找电路(circuit)层面激活模式相似的文本,即考虑「上下文依赖的神经活动」。这是个开放性猜想帖,未给出实验数据,但指出了当前机械可解释性里按字面文本聚类可能忽略电路级相似性的盲点。
「研究」频道最新
- 新研究解析 grokking 机制:平台期长短与初始化失衡有关 — CatAstro_Piyush · 2026-10-21
- NVIDIA 团队发布 JCA:为任意骨骼协同生成 3D 动作与视频 — nvidia · 2026-10-21
- 清华发布 Event-STVG 基准:4016 个事件考验长视频推理 — Yizhe Zhang · 2026-10-21
- SpecKCast:频域 Kalman 滤波加速 Diffusion Transformer 推理 — SamsungResearch · 2026-10-21
- 55.8 万次评测揭示:视觉语言模型在特定子任务上越放大越差 — UniversityOfEdinburgh · 2026-10-21
- LFD 方法:用自然语言目标蒸馏控制科学生成模型,无需手工奖励函数 — hbouammar · 2026-10-21