学者辩论:预训练提升或更多来自人工改进而非堆算力堆数据
davidmanheim · x · 2026-09-09
davidmanheim 回应 Toby Ord 对「只加算力/只加数据」路线的批评,认为预训练质量的边际证据表明改进更多来自算力、数据之外的因素,这意味着纯 scaling 轨迹的天花板比宣称的更低更平。他并提出一个值得追问的问题:「质量缩放」(quality-scaling)的上限在哪里——数据质量提升是否存在边界。
所属事件:学者激辩预训练 scaling 放缓,改进或更多来自算力之外(4 条相关)→
「漫话AGI」频道最新
- 博主引古典意识观:AI 若有意识便无法被奴役 — eigenhector · 2026-10-27
- 经济学家 Bharat Chandar 出任 GovAI 研究员,主导 AI 经济指标项目 — RishiBommasani · 2026-10-27
- MIT Tech Review 起底 Anthropic:IPO 招股书背后的叙事策略与身份张力 — MIT Tech Review AI · 2026-10-27
- AI 检测工具 Pangram 遭围攻:作者称攻击源于对 AI 改变写作的恐惧 — gleech · 2026-10-27
- 日本 Aeon 前高管:AI 智能体是此生最具影响力的创新 — akumar · 2026-10-27
- 物理学家让 AI 自选课题:两小时产出可登顶刊的论文 — burny_tech · 2026-10-27