斯坦福免费开放 CS336 课程:18 讲从零构建大语言模型
mdancho84 · x · 2026-10-19
数据科学家 Matt Dancho 推荐斯坦福 2026 春季课程 CS336: Language Modeling from Scratch,认为与其再考一个机器学习认证,不如学会「工程化 AI 系统」——理解 LLM 底层原理并能搭建其背后的系统,而非只会调 API。
课程共 18 讲,覆盖现代 LLM 的工程全链路:
- 架构:分词、Transformer、MoE
- 硬件:GPU、TPU、内存与 FLOPs
- 性能:Triton、FlashAttention、并行化
- 训练:Scaling laws、数据管线、分布式训练
- 部署:推理与评估
- 后训练:SFT、RLHF、强化学习
课程免费公开,适合想从「调 API」升级到「懂原理、能造系统」的工程师。
所属事件:斯坦福免费开放 CS336 课程,18 讲从零构建大语言模型(2 条相关)→
「漫话AGI」频道最新
- 「公共利益」三问:谁来界定 Anthropic 公益基金的受益者 — Dr_Atoosa · 2026-10-19
- 模型训练会否垄断?作者:scaling 下终将出现单一大赢家 — abhiadesai · 2026-10-19
- 网友推断:具备 RSI 能力的下一代模型不可能开源 — teortaxesTex · 2026-10-19
- Victor Taelin 长文畅想:AGI 时代的卒中急救能拯救多少人生 — louisvarge · 2026-10-19
- 研究者吐槽:ICLR 的 AI 安全论文多为简历垫片,奖励黑客毁掉整个领域 — JacquesThibs · 2026-10-19
- Anthropic 首次披露:Claude 已驱动其 26% 的 AI 研发工作 — emmanuelvivier · 2026-10-19