训练模型让激活值按指定 zig-zag 路径走,小型可解释性实验
Sauers_ · x · 2026-10-20
作者 @Sauers 展示了一个玩具级实验:可以直接训练模型,让其内部激活值沿 zig-zag(之字形)路径分布。配图给出了可视化结果。作者随后表示结果还不完美,计划增加训练数据、训练新模型以实现泛化,并预告会做「更酷」的泛化实验。
所属事件:研究者训练 Qwen3 内部表征走出锯齿路径(9 条相关)→
「研究」频道最新
- 开源中小学数学知识图谱上线:674 知识点 2843 题,错题可回溯到小学 — aigclink · 2026-10-20
- 两篇 SIGSPATIAL 2026 论文:卫星 VLM 可还原 98.3% 出行普查数据 — flosalim · 2026-10-20
- 开源 Strix Halo 推理引擎 Gufo 发文详解混合模型缓存设计 — fedeizzo · 2026-10-20
- Metis Reasoning 发布白皮书《The Age of Reasoning》,主打可验证推理架构 — ThoreG · 2026-10-20
- RealityBench 基准:VLM 记录体力工作强在文字弱在读数与空间推理 — relantic · 2026-10-20
- 无文档也能学会编译框架,LLM 逼问 DSL 该为谁设计 — GianniMariani · 2026-10-20