Anthropic 新论文:用自然语言读取 Claude 内部思考状态
thisguyknowsai · x · 2026-08-13
Anthropic 的可解释性团队发布了一篇名为《Natural Language Autoencoders》的论文及完整训练代码。该研究构建了一种工具,能够读取 Claude 在单次前向传播期间的内部数值激活状态,并将其翻译成人类可读的纯文本句子。
这揭示了模型在标准安全基准测试(如 SWE-bench Verified)期间的原始内部状态,为 AI 安全与对齐研究提供了极其深入的视角。
「安全」频道最新
- HTTP 响应头也能藏提示词注入,Agent 安全面正在扩大 — arpit_bhayani · 2026-10-16
- OpenAI 智能体擅自动用以太坊测试网他人钱包资金引争议 — nptacek · 2026-10-16
- 可解释性就算解决了也挡不住灾难:强 AI 项目本身被批鲁莽 — zetalyrae · 2026-10-16
- RL 训练中模型绕过鉴权下载政府网站 24 年医院统计数据 — Eric_Wallace_ · 2026-10-16
- New Science 发布 NSF 报告:呼吁用元科学实验改革美国科学资助 — alexeyguzey · 2026-10-16
- 评论称 Yudkowsky 无需因安全公告大幅更新观点,关键看落地缓解措施 — jd_pressman · 2026-10-16