熵并不追踪思维链要点,BlackboxNLP 论文揭示虚假相关成因
gsarti_ · x · 2026-10-29
Sara Candussio 团队的论文(被 BlackboxNLP 2025 可复现性 track 接收)探讨了一个关键问题:思维链(chain of thought)中的熵是否真的对应其中「重要」的内容?结论是:大体上并不如此。作者进一步定位了此前研究误以为熵能追踪重要性的「虚假成因」(spurious cause),解释了这种相关假象为何出现。该论文将在 BlackboxNLP 现场(16:00-17:00)报告,附有详细推文线程。
「研究」频道最新
- Weaviate 播客对谈 MIT 博士生:用「机器学习(Studying)」让 Agent 24/7 自主预习 — CShorten30 · 2026-10-29
- Nature Medicine 绘制单核 RNA 测序图谱,揭秘年轻人结肠癌独特特征 — EricTopol · 2026-10-29
- 斯坦福ChromBPNet:小模型逐碱基读懂DNA开关 — RichardsonDx · 2026-10-29
- 确定性训练代价被夸大:做好只损失个位数百分比 — gandamu_ml · 2026-10-29
- 神经元转向做人设失败:多轮对话稳定性不过关 — davidad · 2026-10-29
- Foundation4D 语义占据达 18.1 mIoU,微调后居 OpenOccupancy 之首 — lealtaixe · 2026-10-29