Keras 创始人：测试时训练是解锁大模型潜力的下一个方向

fchollet · x · 2026-08-13

François Chollet 指出，当前主流的测试时计算（如自然语言推理）在计算上等同于测试时搜索。他认为，利用梯度信号进行测试时训练（TTT）是另一条极具潜力且不应被浪费的路径。

他此前曾强调，单纯扩大预训练模型规模的范式已经终结，研究者正转向测试时训练以及程序合成、符号工具使用等神经符号方法。TTT 在 2024 年的 ARC Prize 竞赛中崭露头角，目前虽仅在 ARC 等少数数据集上显著优于其他方法，但他看好其走向主流的潜力。