斯坦福发布 ParallelKernelBench:最强模型多卡 kernel 零样本仅 32% 正确
斯坦福与 UCSD 团队发布 ParallelKernelBench(PKB),这是首个系统性评估 LLM 编写多 GPU 高性能 kernel 能力的基准,并已被 NeurIPS 2026 接收为海报论文。评测结果显示,表现最强的模型在零样本条件下生成多卡并行 kernel 的正确率仅为 32%,揭示了大模型在多 GPU 编程任务上的显著短板。
2026-11-04 ~ 2026-11-05 · 2 条相关
- 斯坦福 ParallelKernelBench 入选 NeurIPS:LLM 零样本仅 32% 多卡 kernel 写对 — simonguozirui · 2026-11-04
- Stanford 发布 ParallelKernelBench:最强模型零样本仅 32% 正确率 — burny_tech · 2026-11-05