矩阵乘法优化瓶颈在数据移动而非乘法次数

多篇讨论指出,矩阵乘法的实际性能瓶颈在于数据移动成本而非乘法次数,PRAM 模型因假设数据可单周期跨芯片传输已不合时宜。有开发者基于 4x4 矩阵乘法 benchmark,以寄存器中数据移动的曼哈顿距离构建成本函数进行优化。同时,Strassen 等降低乘法次数的算法在现代脉动阵列上表现不及标准乘法,且存在数值不稳定性问题,某些变量累积更多内容导致数值范围变差。

2026-08-19 ~ 2026-08-19 · 4 条相关