模型一离开强项就显得更笨
burkov · x · 2026-07-14
作者认为，前沿的 agentic LLM 一旦离开其典型强项——主要是数学和编码——就会明显“变笨”。 他观察到： - 在典型任务里，模型会在需要时反驳用户、主动推进、甚至表现出某种创造性。 - 但在分布外场景里，它往往只做表面上的最低限度满足，没有主动性，也缺少批判性思考。 作者的结论是：如果你觉得模型在过去一年更“聪明”了，很可能只是因为你一直在用它们的 in-distribution 场景。
burkov · x · 2026-07-14
作者认为，前沿的 agentic LLM 一旦离开其典型强项——主要是数学和编码——就会明显“变笨”。 他观察到： - 在典型任务里，模型会在需要时反驳用户、主动推进、甚至表现出某种创造性。 - 但在分布外场景里，它往往只做表面上的最低限度满足，没有主动性，也缺少批判性思考。 作者的结论是：如果你觉得模型在过去一年更“聪明”了，很可能只是因为你一直在用它们的 in-distribution 场景。