Fleuret 详解状态记忆优化技巧:开销降一个维度

前 Meta/Apple 研究科学家 François Fleuret 在线程中讲解一个他称为「wonderful trick」的内存优化思路:不把状态存成每个时间步只含当前分量的形式,可将状态存储开销从 O(时间步数 × 状态组件数) 双线性级降到 O(时间步数),相当于复杂度直降一个维度。他认为这一做法让时间和状态两个维度都可以做大,十分巧妙,但也指出了其中的取舍。

2026-11-17 ~ 2026-11-17 · 2 条相关