PyTorch 2.14 发布:nccl2 后端与容错机制成为一等公民
StasBekman · x · 2026-09-04
PyTorch 2.14 正式发布,含 2,995 次提交、487 位贡献者。要点:
- NVGEMM:CuTeDSL 生成的 CUTLASS 内核进入 Inductor,支持 epilogue 融合、NVFP4 GEMM 与分组归约
- nccl2 后端:自 torchcomms 移植,提供非阻塞通信器与即时通信器切分
- 容错(fault tolerance)成为 c10d 一等概念:支持进程组原地重配置、单向 RMA 窗口,Flight Recorder 不再仅限 NCCL
- Apple Silicon:原生线性代数(Jacobi SVD、eigh、QR、Cholesky)与 Metal 内核迁移
- 其他:torch.switch 多路分支、CUDA graph 内捕获 whileloop、@dynamicspec 声明式动态形状、复数张量的实验性 torch.compile 支持,并新增对 Rubin (sm107)、ROCm 7.14、Intel XPU 图捕获的平台支持
所属事件:PyTorch 2.14发布:2995次提交、487位贡献者参与(3 条相关)→
「Infra」频道最新
- MIT 团队实测:agent 编码用量若按 API 计费每月高达 4 万美元 — ChrisRackauckas · 2026-10-18
- 越狱 PS5 跑 llama.cpp:开源 PS5LM 让主机变身家庭本地 LLM 服务器 — wateriscoding · 2026-10-18
- DFB 激光器耦合薄膜铌酸锂芯片:最高 170mW、阈值仅 40-45mA — jwt0625 · 2026-10-18
- 5070 Ti 外挂 3070 混搭跑 Qwen 35B 达 82 tok/s — hereforcheesee · 2026-10-18
- 中国在建/规划功率半导体晶圆厂达 69 座,遍布 58 家厂商 — zephyr_z9 · 2026-10-18
- 研究测算:AI 数据中心每年需 3.5 万亿美元收入才能撑住 — TheseFact · 2026-10-18