《推理引擎如何工作》讲座幻灯片上线 Google Slides,可在线查阅
zainhas · x · 2026-09-12
zainhas 在推文后补充放出了《How Inference Engines Actually Work》讲座的完整幻灯片(Google Slides 在线版本),内容端到端覆盖一个请求的完整生命周期:推理引擎架构、KV + prefix caching、continuous batching、PagedAttention、chunked prefill、采样与反 tokenization,以及从引擎内部视角看 agentic loop。
这是对前一条发布预告的正式交付,读者可直接在线翻阅整套材料。
所属事件:开发者公开推理引擎工作原理完整讲座幻灯片(3 条相关)→
「Infra」频道最新
- Intel 工程师实测共封装光学:V 型槽边缘耦合新方案 — jwt0625 · 2026-09-12
- Intel 工程师曝光晶圆级测试中的芯片封装检测现场 — jwt0625 · 2026-09-12
- 前 Google 工程师猜想:苹果或做 Apple Silicon 原生的下一 token 预测器 — yaroslavvb · 2026-09-12
- Yaroslav Bulatov 推 A100 专用架构实验,直指反向传播的内存墙 — yaroslavvb · 2026-09-12
- DeepSeek 判定:提升数据质量的 ROI 已远超设计新后训练算法 — yacineMTB · 2026-09-12
- ADSP 第 303 期:与 Mark Saroufim 聊开源模型、AI 生成 GPU 内核与 autoresearch — blelbach · 2026-09-12