双卡 Arc Pro B60 跑 35B 模型推理速度达 100 tok/s
一项推理部署结果显示,在 2 张 Intel Arc Pro B60 显卡上,使用 QuixiCore SYCL kernel 运行 35B-A3B 模型的 NVFP4 量化版本,推理速度达到了每秒 100 token。这一成果展示了 Intel 显卡在本地大模型推理场景下的性能潜力,为高性价比推理硬件提供了新的参考方案。
2026-07-19 ~ 2026-07-19 · 2 条相关
- Arc Pro B60 上跑出 100 tok/s — QuixiAI · 2026-07-19
- 256k上下文推理跑到100 tok/s — QuixiAI · 2026-07-19