Anthropic 可解释性研究汇总:模型内部形成全局工作区
aryaman2020 · x · 2026-08-08
推文盘点了 Anthropic 在 Transformer Circuits Thread 上的系列可解释性研究。重点提到了“J Space 论文”,指出语言模型的中间层会形成全局工作区,并拥有一套可自我报告和控制的特权表征。
此外,汇总还涵盖了多项前沿探索:包括自然语言自动编码器(将模型内部状态翻译为自然语言)、情感概念在模型输出中的因果影响,以及模型对自身内部状态的内省意识等。
「研究」频道最新
- ETH Zurich 提出 LFD:用冻结 LLM 当老师,自然语言驱动药物设计生成器 — rohanpaul_ai · 2026-10-16
- 社区热议能否用 Claude Sonnet 3 对话数据训练模型 — Sauers_ · 2026-10-16
- 有人求购 Sonnet 3 对话数据集引出社区共享 — arm1st1ce · 2026-10-16
- MLCommons 推出 MLPerf Endpoints,按真实服务端点测推理性能 — TheKanter · 2026-10-16
- 网友自建 LEGO 搭建评测:GPT-6 Astra 力压 Opus 夺魁 — TheLegoless · 2026-10-16
- tszzl 给出理论:Tornado 经 Apache 一路联想到 Colorado — tszzl · 2026-10-16