Gemma 研究发现,物理规律编码在隐藏状态关系中
ProfBuehlerMIT · x · 2026-07-23
作者基于 Google 的 Gemma 模型提出:物理知识并不是以静态神经状态“存着”,而是体现在隐藏状态之间的关系里。
他们用反事实提示对模型做“拉伸”式探测,得到三层内部物理表征:
- 可读性:即使提示词里完全没出现,腐蚀、韧性、氧化等材料概念仍可从中间隐藏状态线性读出。
- 表征:比起绝对位置,状态位移更能对应直接/中性/反向的本构关系;在 60 条材料科学规律上相关系数达到 ρ = 0.910,并正确定向了 40 条里的 39 条。
- 因果使用:把一个冻结的微结构方向注入隐藏状态后,模型输出偏好会按对应规律发生可控偏移。
作者将其视为面向科学 AI 的一步:未来模型不只要答得像,还要在内部真正保留物理规律,并暴露可检验的推理结构。
所属事件:新研究称大模型物理知识存在于隐藏状态变换中(2 条相关)→
「研究」频道最新
- OpenMed 满一周年:医疗仍是开源 AI 最薄弱的一环 — MaziyarPanahi · 2026-07-23
- Fable 被用来推翻一个 50 年的代数几何猜想 — Dr_Singularity · 2026-07-23
- 科学家发现抹香鲸会在船只靠近时改变发声 — begusgasper · 2026-07-23
- Google 放出 AI and Economy ATLAS 博客和技术报告 — JMateosGarcia · 2026-07-23
- OPD² 只蒸馏推理微调新增增量,不学教师旧风格 — coallaoh · 2026-07-23
- Google 将 1500 万次 Gemini 对话映射到 800 个职业和 4000 项任务 — JMateosGarcia · 2026-07-23