微软 HotChips 演示揭示 AI 集群带宽瓶颈
bookwormengr · x · 2026-08-31
在 HotChips 会议上，微软的演示揭示了 AI 集群架构中存在的“带宽墙”：本地加速器之间带宽为 6-7 400G（非交换网络），而不同计算托盘/机架的加速器之间仅 2 400G（交换网络）。虽然微软统一使用了协议且采用片上 NIC，但这一带宽差异巨大。技术上可以通过重新分配每加速器 28 个 400G 链路来消除此墙，但这取决于是否需要超过 4 个节点的张量并行。
「Infra」频道最新
- 同样 1000 个 Cloudflare Durable Objects，月成本从 4050 美元压到 22 美元 — threepointone · 2026-10-16
- NVIDIA 发布 Qwen3.8-Flash FP4 量化版，主打本地部署 — nvidia · 2026-10-16
- 百度提出 Virtual Head Attention：同时压 KV cache、算力并保质量 — baidu · 2026-10-16
- DuoDiscover 让 Agent 自建快速评估代理，TPU 内核提速 2.68 倍 — berkeley_ai · 2026-10-16
- Google 将 2026 年资本开支上调至最高 2050 亿美元 — emmanuelvivier · 2026-10-16
- Google 开源 AX:像 Kubernetes 一样编排数十亿 Agent 任务 — thisdudelikesAI · 2026-10-16