FlashAttention 作者 Tri Dao:底层算子与推理栈优化是下一步突破口

togethercompute · x · 2026-08-13

在 ICML 期间的一场访谈中,FlashAttention 作者 Tri Dao 分享了他对 AI 架构演进的看法。当被问及下一个重大的架构突破来自何处时,他给出了反直觉的结论:并不存在单一的“银弹”架构。

他认为,真正的性能解锁来自于底层层面的内核优化、推理栈改进以及集群级别的调度优化。此外,他强调目前这些关键的基础设施工作大多是在开源社区中推进的。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →