GLM-5.3 Infra Agent 两周内接管自家国产芯片推理调优

Afinetheorem · x · 2026-09-17

智谱 jietang 透露:从 GLM-5.3-Flash 首次跑上国产加速器到承接全部生产流量只用了两周,端到端吞吐提升 3.2 倍,大量优化工作由一个由 GLM-5.3 驱动的 Infra Agent 完成——即模型在优化服务自身的系统。

条件相当受限:内存与互联带宽不足、需支持 1M token 上下文与多模态请求、软件栈不成熟(kernel 缺失、文档基本靠猜)。Agent 的每次优化都是权衡:用算力换内存(ReplaySSM)、用通信换内存(节点内张量并行)、用精度换容量(混合 INT8/FP8/BF16)等。

Martin Chorzempa 评论称,这与美国实验室当前的沟通口径形成鲜明对比,显示中国实验室在用 AI 极限加速训练上毫不犹豫。

所属事件:智谱披露RSI最小闭环:InfraAgent两周上线10万国产卡推理(16 条相关)→

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →