单x16槽驱动8卡:PCIe双交换扩展板拆解与接线定论
Hugging Face 员工 Zach Mueller 拆解并实测了一款 GPU 扩展板:板载两颗 PCIe switch,使主机仅凭一个 PCIe x16 插槽即可驱动最多 8 块 GPU,板子售价约 $4k。他随后多次补充接线细节,确认单槽外挂第 9 块 GPU 的思路行不通,并指出保留级联配置需另走一路 direct 连接并加装 retimer。该方案对插槽数有限的工作站或紧凑机箱内搭建多卡环境有直接参考价值。
已确认
- 扩展板内部集成两颗 PCIe switch 芯片,是单 x16 带多卡的关键。
- 支持两种接线方式:直连(两条 PCIe x16 转 4x x8 MCIO 线),GPU 各自获得独立带宽;或级联(单条 x16 分出 2x x8 MCIO),再经 MCIO 下行继续扩展更多设备。
- 作者实测了该板的 P2P 拓扑表现。
- 同一板卡也可用于连接 2 块 GPU 的轻量配置。
- 据经销商确认:若要使用辅助的 direct 连接(directs),必须将它们接到对应的主机连接器上才能工作;这意味着在单一 x16 插槽之外再外挂第 9 块 GPU 的做法行不通。
- 在放弃外挂第 9 块 GPU 的方案后,若要保留 cascade 配置,必须走另一路 direct 连接,并额外加装一颗 retimer。作者为此前对该板工作原理的误解致歉。
为什么重要
- 该方案把多 GPU 部署对主板插槽数量的依赖压缩到单条 x16,对工作站或紧凑机箱内搭建多卡推理/训练环境有直接参考价值。
- 直连与级联两种拓扑让用户可在带宽独立性与扩展数量之间灵活取舍,但接线约束(direct 连接需占用主机对应连接器、级联需另走 direct 并加 retimer)也划定了扩展上限。
2026-10-10 ~ 2026-10-10 · 8 条相关
一手来源
- 一块 x16 槽带 8 卡:内嵌 PCIe 交换机扩展板的直连与级联玩法拆解 — TheZachMueller ·
- 实测澄清:单 PCIe 槽外挂第 9 块 GPU 的思路行不通 — TheZachMueller ·
- 保留 cascade 配置需经另一路 direct 并加装 retimer — TheZachMueller ·
- 【源头】一块 x16 槽带 8 卡:内嵌 PCIe 交换机扩展板的直连与级联玩法拆解 — TheZachMueller · 2026-10-10
- 一块约 $4k 扩展板让单条 PCIe 插槽驱动 8 张 GPU — TheZachMueller · 2026-10-10
- 单 x16 插槽带 8 卡:博主实测 PCIe 扩展板 P2P 拓扑 — TheZachMueller · 2026-10-10
- 双 PCIe 交换芯片扩展板解析:一个 x16 槽带动 8 张 GPU — TheZachMueller · 2026-10-10
- 【源头】实测澄清:单 PCIe 槽外挂第 9 块 GPU 的思路行不通 — TheZachMueller · 2026-10-10
- 【源头】保留 cascade 配置需经另一路 direct 并加装 retimer — TheZachMueller · 2026-10-10
另有 2 条近重复转述:TheZachMueller · TheZachMueller