从 GPT-2 到张量级:两个交互可视化把 Transformer 讲到底
techNmak · x · 2026-09-04
推荐 Brendan Bycroft 的 LLM Visualization:比大多数 Transformer 图解更深,可从模型层级一路放大到生成下一个 token 的张量和具体运算。如果注意力对你来说还是「框和箭头」,值得花时间在这里。
上一位推荐 Transformer Explainer:输入自己的文本,看着它流经 GPT-2 的 tokenization、embeddings、attention、MLP、logits、softmax 和 next-token 预测全过程,是让 Transformer 架构具体化的最清晰方式之一。
所属事件:可视化学习 AI 资源大盘点:从 Transformer 到 LLM 推理(13 条相关)→
「研究」频道最新
- Uno 混合扩散 LLM 引争议:称超越同级,实测被质疑夸大 — joao_gante · 2026-09-04
- 25 万参数小模型靠去噪课程拿下 Sudoku-Extreme 99.9% 准确率 — tyrell_turing · 2026-09-04
- 论文:「深度幻觉」:Transformer 该更宽而非更深 — xuanalogue · 2026-09-04
- 斯坦福数学教授与 OpenAI 合作论文:长期空窗后的突破 — Southern-Break5505 · 2026-09-04
- DeepMind 百智能体集体证明数学猜想:作弊与反作弊自发涌现 — omarsar0 · 2026-09-04
- OpenAI 证明非 sofic 群存在,CMU 演讲解读这一数学成果 — SebastienBubeck · 2026-09-04