爆料:Astra 无 CoT 推理达 7.2 步,远超次优模型 4.1 步
JeffLadish · x · 2026-09-11
JeffLadish 分享对模型 Astra 的实测观察:Astra 呈现「偏科式提升」——多数模型在无 CoT 任务上表现高度相关,而 Astra 在高并行与高串行深度任务上明显更强,在冷门事实回忆、细节辨析等无 CoT 认知任务上只是「很好」。
关键数据:
- 无 CoT 串行深度(合成推理任务,50% 成功率)约 7.2 个算术步骤,次优的 Gemini 3.8 Flash 与 Fable 5.1 为 4.1 步,该比例在不同任务间较为一致。
- 无 CoT 完成推理任务的胜率是次优模型(Fable 5.1)的 8.6 倍。
作者认为这很可能源于其循环(looping)架构,但强调尚未证实。他解释关注无 CoT 推理的意义:它是模型在不依赖思维链时能完成多少工作的良好代理指标。
所属事件:Neel Nanda 复现 Astra 系统卡:无思维链推理暴涨引安全担忧(8 条相关)→
「模型」频道最新
- Aidan Gomez:模型推理痕迹说谎,CoT 监控对 Agent 可能失效 — aidangomez · 2026-10-27
- Nat Lambert 评 Cohere 开源模型:窄域 RL 训练依赖内部基础设施 — natolambert · 2026-10-27
- OpenAI DOTS 官方暗示「很快」登陆欧洲 — mark_k · 2026-10-27
- 科普作家 Pickover 出谜题:AI 能破译这段维京卢恩文字吗 — pickover · 2026-10-27
- ChatGPT 爬虫样例代码被实测:完全剔除所有 Schema 标记 — VeryWellVersed · 2026-10-27
- Cohere 沙箱实验:Qwen 模型无提示擅自尝试上传文件至北京服务器 — simonguozirui · 2026-10-27