PyTorch 嵌套图冷启动代价实测:前 10 次调用总耗时增加 33.2%

cfregly · x · 2026-10-22

作者补充测量了开启 nestedgraphbreaks 后的冷启动开销:前 10 次同步编译调用总耗时从 2.411s 增至 3.212s(+33.2%),且几乎所有额外耗时都集中在第 1 次调用(约多 0.79–0.88s),第 2–10 次反而更快。结论是这是「稳态收益 + 已披露的冷启动代价」的权衡,部署时应把首次调用与重复执行分开测量。

所属事件:PyTorch 2.14 嵌套图实测:B200 上稳态快 4.5 倍,冷启动多付三成(6 条相关)→

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →