LLM 架构长演进梳理到 Kimi K3
baseten · x · 2026-07-28
这是一篇把 2017 年以来的 LLM 架构演进 一路梳理到 Kimi K3 的长文/工作笔记。
- 文章把 Kimi K3 放在一条长期的架构与规模演进链条里看，而不是单独当作一次发布。
- 被引用的文章里用一个夸张对比说明规模变化：按文中说法，22,580 个 GPT-2 级别模型才能装进一个 Kimi K3 量级的系统里，用来强调 2019 以来模型尺度的巨大变化。
- 整体更像是给想看“架构时间线”的人准备的技术阅读，而不只是新闻转述。
所属事件:Kimi K3 公开后焦点转向架构(25 条相关)→
「研究」频道最新
- 四足机器人实机实现变形+步行:各姿态单独强化学习、变形时切换策略 — _Stocko_ · 2026-10-16
- KinoGen 用运动学视频生成直接为人形机器人合成全身操作参考动作 — ChongZzZhang · 2026-10-16
- Science Robotics 论文提出 F³ 事件相机预测表征，超越光流 — CSProfKGD · 2026-10-16
- VideoGen-Agent:基于 Qwen3-VL 的 8B 多模态 Agent 用工具循环改写视频生成 — jiqizhixin · 2026-10-16
- 前沿实验室代码多由 AI 编写，论文提出「理解力审计」安全门槛 — ronbodkin · 2026-10-16
- Not Boring 周报：可解释性乐观论、飞行跑车与 tau 蛋白降 73% — Not Boring (Packy McCormick) · 2026-10-16