商汤大装置国产算力转正
量子位 · wechat · 2026-07-19
商汤大装置在 WAIC 期间披露了国产算力规模化商用进展:国产芯片相关业务毛利率已转正,日均 Token 处理量预计从年初 4000 亿提升到 7 月末 2.42 万亿,年底目标 10 万亿。 文章重点介绍其“异构混合推理”方案:将 Prefill 与 Decode 分离,用高端资源承接带宽瓶颈环节、更多国产芯片承担吞吐环节,并配合算子重写、编译器适配、调度优化等系统工程,把国产芯片 MFU 提升 85%–152%,单位成本 Token 产出提升 2.5 倍。 此外,商汤还把电力纳入联合调度,发布“算电协同 Agent”,通过预测任务耗电特征、联动峰谷电价和储能设施,使单位电力成本的 Token 产出提升约 80%。文章也提到其联合多家国产芯片厂商和科研机构,推进国产 AI 基础设施生态与科学发现平台建设。
「Infra」频道最新
- 黄仁勋东京会见日本半导体高层 — nvidia · 2026-07-21
- Infinity 启动并融资 1500 万美元 — mmmbchang · 2026-07-21
- 如何参与Stratum并获取$STRAT — rsalakhu · 2026-07-21
- LLM每token能耗或已低于人脑 — jd_pressman · 2026-07-21
- Couchbase 的多模型 AI 架构实践 — AWS ML Blog · 2026-07-21
- 一天实测Kimi K3:上限高但代价大 — Tarandjpop · 2026-07-21