GLM-5.2在GB10上的吞吐
ciprianveg · reddit · 2026-07-15
有人实测 GLM-5.2-Int4-Int8 跑在 8× GB10 上的性能:
- prefill 约 1,200 t/s
- 平均 decode 约 33–54 t/s(按通用/编码结构化任务)
- 还提到可以同时再跑一个 Mimo 2.5,用于图像/音频输入
- 两个任务都使用 tp 8
这条信息更像是模型在特定硬件上的部署/推理表现,而不是模型本身的新发布。
「Infra」频道最新
- 分析师:蚂蚁是当前工作负载最具弹性可置换的模型厂商 — BenBajarin · 2026-10-26
- Anthropic S-1:训练基建优势使单任务成本降40%、营收增速翻倍 — BenBajarin · 2026-10-26
- 研究揭示合成数据最优比例随算力从10%升至32% — heghbalz · 2026-10-26
- 多州暂停新建数据中心,72% 美国人反对建在家门口 — YvesMulkers · 2026-10-26
- 500 万美元种子轮不够 DeepSeek 训一遍:没 GPU 的 AI 创业只剩三条路 — FinanceYF5 · 2026-10-26
- HBM 需求转向:低端推理砍单,Rubin 将全系 12-high HBM — BenBajarin · 2026-10-26