Baseten 推出 GLM-5.2 Fast API,TPS 提升 2 到 3 倍
baseten · x · 2026-07-24
Baseten 发布了 GLM-5.2 Fast,这是它面向高实时性场景的新版 Fast tier Model API。
官方称,新 tier 相比标准版 GLM-5.2 MAPI 能提供 2–3 倍更高的 TPS,并且在性能保障上有更严格的护栏。
所属事件:Baseten推出GLM-5.2 Fast API,实时吞吐提升2-3倍(6 条相关)→
「Infra」频道最新
- 从聊天到 Agent,推理延迟正在成为生产级瓶颈 — Euphoric_Sea632 · 2026-09-11
- 推理服务关键指标盘点:流式速度 TPOT 与可用性如何影响体验 — abhijithneil · 2026-09-11
- PlanetScale 推出分片 Postgres,768 台服务器组成 1PB 单库 — dhruv2038 · 2026-09-11
- 7900 XTX 24GB 能否跑 Qwen,Reddit 征集 ROCm 实测数据 — thenomadexplorerlife · 2026-09-11
- 实测戳破 RTK 省钱神话:token 省了,账单分文未降 — Bartaseth · 2026-09-11
- SF Compute 创始人:现在买算力是「绝对糟糕的体验」 — IgorCarron · 2026-09-11