9 个 AI 模型读《哈克贝利·费恩历险记》:仅 Claude 两次全对
GaryMarcus · x · 2026-10-15
Gary Marcus 转引一项测试:实验者修改了《哈克贝利·费恩历险记》的文本,让 9 个 AI 模型各对某一章节做两次摘要,考察它们是否遵循修改后的内容而非依赖训练记忆。
结果显示:只有 Claude Fable 5 两次都遵循了被修改的文本,GPT-5.5 仅一次遵循,其余模型均未通过。Marcus 认为这与他在 2014 年提出的「理解力挑战」以及与 Miles Brundage 的赌注直接相关,即当前大模型在真正理解文本上仍存在系统性缺陷。
「模型」频道最新
- Paper Instruments 发布 Ultramarine 1 Flash:用 RL 训练不可验证知识工作 — lmoroney · 2026-10-15
- OpenAI Codex 负责人预告「重置」回归:Day 10 将在两小时内上线 — BMarinov · 2026-10-15
- SaaSletter:企业 AI 风险指标两年涨 9.3 倍,或预示 Anthropic 营收走势 — thedealdirector · 2026-10-15
- 网友爆料:Anthropic 疑似训练模型打游戏,Opus 5.5 游戏表现超 Astra — imjustnewatai · 2026-10-15
- Maya-2 开源发布:印度语系语音模型登顶 Hindi TTS 榜单 — CurieuxExplorer · 2026-10-15
- 模型或能纯靠文本指纹识别 AI 生成内容,评测沙箱面临被识破风险 — scaling01 · 2026-10-15