GPT-5.6在Cerebras上达750 tok/s 提速近10倍
daniel_mac8 · x · 2026-07-07
GPT-5.6 Sol 在 Cerebras 推理芯片上以约 750 tokens/秒 的速度提供服务，而 GPT-5.5 此前约为 80-95 tokens/秒，提速接近 10 倍。这展示了专用推理硬件在大模型服务上的速度优势。
所属事件:OpenAI 官宣 GPT-5.6 Sol 周四发布，早期实测评价两极(58 条相关)→
「Infra」频道最新
- 双 DGX Spark 实测：GLM-5.3-Flash 写作与视觉胜过 DeepSeek-V4-Flash — kuhunaxeyive · 2026-09-03
- Jeff Dean 2007 年幻灯片流出：数据中心硬件故障实录 — SumitGup · 2026-09-03
- 谷歌 Hot Chips 发布第八代 TPU:一年两款芯片,推理训练分开设计 — firstadopter · 2026-09-03
- 数据中心耗水是迷思？现代机房多用闭路冷却，用水仅如写字楼 — GlenBradley · 2026-09-03
- 推理工程吃香：vLLM/SGLang 搭副本加缓存路由核心配方 — GabGarrett · 2026-09-03
- Databricks 在 VLDB 2026 主推 agent 原生数据基础设施 Lakebase — matei_zaharia · 2026-09-03