Creon:算法进步终将压过硬件红利,再尝「反向苦涩教训」
bradneuberg · x · 2026-11-11
转发观点:考虑到量化、蒸馏、亚二次方注意力、循环架构、Transformer 本身以及未来的算法进展,历史规律大概率重演——算法层面的改进终将压过硬件带来的提升。作者称这是「被反复吸取的反向苦涩教训」(reverse bitter lesson)。
这一判断与当下大炼算力的行业氛围形成对照,值得与硬件 scaling 路线观点对照阅读。
「漫话AGI」频道最新
- SimpleBench 出现趋势偏离:最新模型常识推理超预期 — ChrisGPT · 2026-11-11
- 安全圈被指「声誉驱动的意见级联」:证据有限却大规模更新立场 — sebkrier · 2026-11-11
- 前 OpenAI 政策主管:METR 报告删节对公众认知影响被高估 — Miles_Brundage · 2026-11-11
- 「相信 CEV 就是相信上帝」:AI 圈的价值对齐神学之争 — mimi10v3 · 2026-11-11
- 2035 年畅想:万亿 AI Agent 包揽脑力活,人类回归动手与现场 — sebkrier · 2026-11-11
- iamtrask 感慨:我们是山丘上的蚂蚁,风中的尘埃 — iamtrask · 2026-11-11