Kimi K3 训后检查点表现出色,获赞预训练扎实
SonglinYang4 · x · 2026-10-16
前同事转发盛赞 Kimi K3 的成绩「非常亮眼」,并指出:在别人家的 benchmark 上拿出强势表现才更有说服力;考虑到该 checkpoint 已经是 post-train 之后,可以推断 Kimi 预训练团队的基础非常扎实。
配图为一份 held-out 评测(bits per byte,越低越好):MAI-Base-2(308B/2.8T)在代码、QA、STEM、数学四项 held-out 集上全面领先,Kimi-K3(104B/2.6T)、DeepSeek-V4-Pro-Base、Qwen3 等依次排后——转推者据此认为 Kimi 的预训练质量过硬。
「模型」频道最新
- Gemini 4 Argon 弹窗宣称 Pro 可用,Jio/Pixel/学生用户却被静默锁定 — kabir_sharma_sans · 2026-10-16
- GPT-6 Sol 开药水店零失误,推理摘要却把库存当成自身属性 — liminal_bardo · 2026-10-16
- willcb 谈 Opus 5.5:不是参数变大,而是数据修好了 — willcb · 2026-10-16
- 曝 Apple 与 Meta 合作:816B 参数模型 Muse Spark Open 可跑在 Mac Studio — TansuYegen · 2026-10-16
- 法国开发者力挺 Mistral:ML4 万亿参数 MoE 未训完已比肩开源前列 — blakesnake86 · 2026-10-16
- Claude Opus 6 EAP 检查点现身,GPT-6.1 Astra 与 MAI-Base-2 泄露汇总 — WorldofAI · 2026-10-16