研究发现 Llama 隐状态呈 3D 螺旋,暗合元素周期表结构
burny_tech · x · 2026-10-29
一项新研究考察开源 Llama 系列模型如何表征元素周期表,发现其隐状态中存在与周期表概念结构对齐的 3D 螺旋结构,预测的原子序数在 (r·cosθ, r·sinθ, r) 螺旋空间中沿原子序数渐变排列。这表明 LLM 能从纯文本学习中反映出科学概念的几何组织方式,为「模型内部形成结构化世界表征」提供了直观证据。
「研究」频道最新
- MIT 研发可注射凝胶修复受损神经,早期实验恢复感觉与运动 — CurieuxExplorer · 2026-10-29
- OmniSpectra:跨仪器光谱基础模型,用连续坐标免重采样学习 — Md Khairul Islam · 2026-10-29
- LIMe 方法省 15% 训练算力:让注意力头复用更早层的表示 — ChampionshipLimp1749 · 2026-10-29
- 两个追踪 Lean 动态的实用站点:Papers With Lean 与 Lean Weekly — TZahavy · 2026-10-29
- Cohere Labs 三篇论文亮相 EMNLP 2026 ORACLE 工作坊 — Cohere_Labs · 2026-10-29
- Cohere 语音理解研究入选 EMNLP Impact Speech 会议 — Cohere_Labs · 2026-10-29