研究员观点:小于 1T 参数模型已达人类水平,说明模型并未「欠参数化」
teortaxesTex · x · 2026-11-03
teortaxesTex 在回复中提出观点:参数量不到 1T 的模型已展现出人类水平甚至超人类的表现,说明它们并没有在最关键的维度上「欠参数化」。他认为如果通往人类样本效率的路径是占据数百节点的模型,那将是坏消息;同时他不认为人类真有约 100T 个有效参数,因为突触高度冗余。
所属事件:研究员观点:不足 1T 参数模型已达人类水平,参数量并非瓶颈(2 条相关)→
「漫话AGI」频道最新
- 反向压力测试能否揭示"伪对齐"的镜像:故意伪装不对齐? — eigenron · 2026-11-03
- 可解释性研究者:识别谄媚头不难,解释模型才算真理解 — kevrussell · 2026-11-03
- Minecraft agent 的真正 benchmark:孩子能否实时玩得开心 — akbirthko · 2026-11-03
- 吴恩达 The Batch 万圣节特刊:AI 恐惧与猎巫式恐慌 — DeepLearningAI · 2026-11-03
- 湾区机加工厂每周接到 5-10 通 AI 制造创业公司的电话 — NYCounihan · 2026-11-03
- 开发者晒 agent 全托管邮箱:很久没手动收发一封邮件了 — signulll · 2026-11-03