Looped transformers 提出第三条扩散模型 scaling 路径
jwvdm · x · 2026-10-06
pmpcurvo 在推文线程中指出,Diffusion Transformer 目前有两条 scaling 路线:把网络做大,或在采样阶段增加评估次数(更多积分步数)。
Looped transformers 则暗示了第三种可能:反复复用同一组参数,在不增加模型体积的前提下提升实际执行的深度。这为扩散模型的规模化提供了新思路。
「研究」频道最新
- Schmidhuber 详解 1991 年位置编码:1/t 双曲时间衰减沿用至今 — SchmidhuberAI · 2026-10-06
- GDELT 用 Gemini 3 每日深度分析 75 国 150 语种电视新闻 — rseroter · 2026-10-06
- MIT 学者指出新量子 APSP 改进并未突破平凡 n^2.5 量子界 — aran_nayebi · 2026-10-06
- Meta AI 发 MIRA:拆分元推理器解决长程研究代理决策难题 — dair_ai · 2026-10-06
- llmClassificR 更新:纯 R 实现 LLM 文本分类全流程,无需 Python — GolinoHudson · 2026-10-06
- 神经科学界争论:为何记忆印迹研究缺乏低垂果实 — ShahabBakht · 2026-10-06