斯坦福新开 CS312 深度学习炼金课:靠大量实验和测验练预测直觉
CatAstro_Piyush · x · 2026-11-13
斯坦福 2026 秋季新课程 CS312: Deep Learning Alchemy(讲师 Tatsunori Hashimoto、Suhas Kotha)面向想做 LLM 预训练研究的人,核心主张是:光懂数学不够,必须靠大量动手实验来建立深度学习直觉。
- 课程形式:作业(跑实验理解现象)与测验(预测 held-out 实验结果)交替,配 lecture 和 tutorial;所有录像和资料将公开。
- 5 学分、不放宽给分,要求完成大量实验和 7 次高难度测验。
- 配图示例题为「给定 6 种 Transformer 变体(去 prenorm/残差/MLP/注意力/RoPE 等),在多组峰值学习率下训练后按最终验证 loss 排序」,考察对消融结果的经验预判。
「公司和人」频道最新
- Luminai Topology 发布:克利夫兰诊所转诊处理从 3 天缩到当天 — ycombinator · 2026-11-13
- 科技圈大佬集体声援深陷绯闻的 CEO,被讽「自找钉上十字架」 — zacharynado · 2026-11-13
- 商学院 AI 助手价差 14 倍:每生 72 美元 vs 不到 5 美元 — joshgans · 2026-11-13
- 传 DeepSeek 被断供华为芯片待遇,梁文锋或已算入预期 — teortaxesTex · 2026-11-13
- Sentry CEO 吐槽:「都 2025 了还有人用故事点」 — zeeg · 2026-11-13
- AIE Code Summit 场场爆满:Zach Lloyd 讲 agent 评测与自改进 — vikvang1 · 2026-11-13