企业仿真基准挑战持续学习假设
Scobleizer · x · 2026-07-14
Skyfall AI 发布了一个名为 Morpheus 的持续企业仿真环境，用来测试模型在“真实业务会不断变化”的场景里是否能持续学习。
他们的结论是：前沿 LLM 不是 continual learners。在更困难的任务上，环境条件变化后 reward 下跌了 95%；GPT-5.5 多次出现 score 归零且无法恢复。相比之下，最弱的 RL baseline 反而 закры合了同一差距的 99.96%。
作者借此强调：当前业界默认“模型会随着经验变强”的想法，并不适用于这种持续演化的企业环境。
所属事件:Skyfall AI 发布 Morpheus 基准：前沿大模型尚不具备持续学习能力(6 条相关)→
「研究」频道最新
- 3D ResNet 论文八年突破 3000 引用，Kinetics 数据集成里程碑 — HirokatuKataoka · 2026-09-11
- 把数据调度变成优化的一部分：样本选择与排序影响 LLM 训练 — Puzzleheaded_Box2842 · 2026-09-11
- Jeff Heaton《神经网络数学导论》开放免费完整下载 — blaizedsouza · 2026-09-11
- 数学家 Daniel Litt 上线问题库,15 题仅 1 题被解,用来追踪 AI 解题进度 — littmath · 2026-09-11
- AI 智能体协作优化 secp256k1 量子电路,挑战打破 ECDSA — StefanoGogioso · 2026-09-11
- Alex Townsend 汇编 200 个数值线性代数开放问题，供人类与 AI 攻关 — IgorCarron · 2026-09-11