斯坦福 Marin 开源模型 535B 预训练完成超 80%
stanfordnlp · x · 2026-10-26
Stanford NLP 转发 Marin 项目动态:开源大模型 Marin 的 535B 参数模型预训练进度已超过 80%。团队放出了训练 loss 与自家 scaling-ladder 预测曲线的对比图,loss 在 4K→16K 上下文切换时出现陡降——作者 dlwh 坦言这相当于「作弊」了外推预测(属计划内切换),之后会重新在 4K 上下文下评测。
所属事件:斯坦福开源项目 Marin 535B 模型预训练进度超 80%(2 条相关)→
「模型」频道最新
- MiniMax H3 本地实测:RTX 5070 12GB 即可流畅运行 — BuyVarious176 · 2026-10-26
- OpenAI Daybreak Blue 个人也能申请,门槛是给账号加硬件密钥 2FA — pvncher · 2026-10-26
- 用户建议关闭 Claude idle compaction:压缩后易误触安全拦截 — andersonbcdefg · 2026-10-26
- X+Grok+Cursor 一号通成噩梦:合并卡死,余额无法迁移 — talkaboutdesign · 2026-10-26
- GPT-6.1 纯视觉通关《最终幻想7》90小时,只靠截图和键盘输入 — Vjeux · 2026-10-26
- Recursive 发布 Flint 本地编码模型,参数小 10 倍逼近 Thinking Machines 的 Inkling — stanfordnlp · 2026-10-26