研究揭示 LLM 存在不可见推理,挑战 AI 透明度
LuizaJarovsky · x · 2026-07-31
一项新研究指出,思维链 并不能完全捕捉大语言模型(LLM)的推理过程。研究将模型内部潜在表征中发生但未在输出中留下可解释痕迹的计算定义为“不可见推理”。
研究还提出了“填充词元”的概念,这些词元对特定问题没有实际语义,但可能在 AI 推理过程中充当程序性提示。
这一发现对 AI 治理产生直接影响:当模型的 CoT 无法反映真实推理时,现有的可解释性要求、透明度合规和审计方法将面临严峻挑战。随着模型能力的提升,这种不可见推理应被视作一种增量风险加以重视。
「安全」频道最新
- 研究员用 AI Agent 两小时复现 Vercel KVM 逃逸漏洞,线索竟来自截图脱敏失误 — evilsocket · 2026-10-16
- 用户投诉 Gemini 记忆删不掉,关掉重开依然全记得 — ThrowRA_Purpose2025 · 2026-10-16
- 你同意了,但你的朋友没同意:Meta Muse 引发 AI 数据授权争议 — LuizaJarovsky · 2026-10-16
- CSO 分析:agent 并未失控,是前沿实验室漏掉了安全基本功 — Sam_Witteveen · 2026-10-16
- Proofpoint 以 63 亿美元现金收购 Varonis,溢价 52% — shashib · 2026-10-16
- 中国商务部与工信部更新 AI 出口管制:大型模型与高敏场景 Agent 受限 — terryyuezhuo · 2026-10-16