HuggingFace 精选博客合集:Smol/Ultra-Scale 训练手册领衔
ariG23498 · x · 2026-10-29
Hugging Face 工程师 ariG23498 整理了一份「人人都该读」的 HF Blogs 合集,覆盖深度学习从入门到大规模训练的核心主题:
- The Ultra-Scale Playbook(4.1k 赞):在大 GPU 集群上训练 LLM 的终极指南;
- The Smol Training Playbook(3.34k 赞):打造世界级小模型的秘诀;
- FineWeb(1.46k 赞):大规模网页文本数据集的构建过程;
- Flow Matching for Image Generation:浏览器内可视化噪声到图像的生成过程;
- Natural Language Processing before LLMs:从 n-gram 到 attention 的动手实践。
适合想系统补深度学习与 LLM 训练知识的读者按图索骥。
「研究」频道最新
- 无需读论文:四步用本地小模型和 Claude 玩转 mech-interp — burny_tech · 2026-10-29
- MIT 团队拆解 Claude「全局工作区」:J-lens 平均后仅保留不足 10% 方差 — burny_tech · 2026-10-29
- J-lens 可直接读出神经元人格词,仓库即将开源 — burny_tech · 2026-10-29
- minilek 追问 PPSZ 类算法:已知 2^(-εn) 亚指数算法能否归入一个自然算法类 — minilek · 2026-10-29
- 理论家辨析:PPSZ 等已知 SAT 算法是否落在 ETH 下界约束内 — minilek · 2026-10-29
- 研究者亲历:一个转向向量即可让 RLHF 模型持续输出违禁词 — voooooogel · 2026-10-29