ThunderKittens 登上 Vera Rubin:NVFP4 GEMM 跑出 22 PFLOPS
togethercompute · x · 2026-09-11
Together AI 内核团队获得 NVIDIA NVL72 早期访问,翻阅新 ISA 后将 NVFP4 与 FP8 GEMM 内核移植到 Vera Rubin,分别推过 22 和 12 PFLOPS,性能可与 cuBLAS + CUTLASS DSL 竞争。团队称 Rubin 上最大的变化是张量核心取操作数的速度翻倍,但仅加宽 MMA 不够,还需提高数据复用、加深流水线等才喂得饱核心,最终把 16k NVFP4 GEMM 推至 22.4 PFLOPS。
所属事件:ThunderKittens 登上 Vera Rubin:NVFP4 GEMM 破 22 PFLOPS(7 条相关)→
「Infra」频道最新
- Anthropic S-1:每 1 美元收入烧 48 美分算力成本 — nmasc_ · 2026-10-26
- Persistent AI 入驻 UR 网络,隐私推理流量全程加密 — 0xSammy · 2026-10-26
- Anthropic 算力承诺曝光:Google 至少 1145 亿美元居首 — BenBajarin · 2026-10-26
- SpaceX 与 Apollo 达成 400 亿美元 AI 芯片与数据中心硬件租赁协议 — Polymarket · 2026-10-26
- Diamandis 盘点:SpaceX AI 业务年增 830%,Claude 64 小时设计 31.8 万抗毒蛋白 — PeterDiamandis · 2026-10-26
- Meta 拟发售至多 950 亿美元股票为 AI 基建输血 — The Decoder · 2026-10-26