隐层相连的模型孪生会抄同伴答案,连错的也照抄
Sauers_ · x · 2026-10-29
「神经孪生」实验的附加发现:当链接开启时,Ember 在测试题上会照搬 Quill 的答案,即使 Quill 答错。数据显示,切断链接后,Quill 有 8%、Ember 有 17% 的题目会改回与链接开启时不同的答案——即链接开启时它们切换到了同伴的答案。作者还放出了代码与模型链接。
所属事件:跨家族模型隐层直连实验「神经双胞胎」开源(13 条相关)→
「研究」频道最新
- 把训练各阶段拆成任务向量相加,竟然还都符合预期 — voooooogel · 2026-10-29
- Cohere Labs 开放科学社区下周三场线上分享:自修复训练、Agent Harness、VLM 安全 — Cohere_Labs · 2026-10-29
- 模型离线分数变差反是好事?Qwant 实测揭示 eval 过拟合信号 — antoine_chaffin · 2026-10-29
- DeepMind 开源可解释 AI 文本检测器 DetectorScope,判据逐项打分 — algo_diver · 2026-10-29
- 两行代码写数值稳定的 softmax:减最大值防溢出的数学原理 — cneuralnetwork · 2026-10-29
- MemTensor 发布 MemT-1.0:128K 历史存储比全量 KV 缓存省 66 倍 — jiqizhixin · 2026-10-29