Tom Yeh 发布 Kimi 3 研讨会录像,从线性注意力讲到 KDA,Nathan Lambert 做客
ProfTomYeh · x · 2026-09-04
Prof. Tom Yeh 公开 Kimi 3 研讨会(Frontier AI Seminar 系列)录像,用手推 Excel 的方式讲清注意力机制的演进路线:vanilla attention → local attention → linear attention → delta attention → Kimi Delta Attention(KDA)。
亮点包括 Interconnects 作者、开源模型领域权威 Nathan Lambert 作为特邀嘉宾出镜,分享了造访月之暗面的幕后故事,并讨论了开源 vs 闭源模型等话题。研讨会还涵盖 Kimi 3 架构解析、Moonshot AI 之行、观众问答等环节。
「模型」频道最新
- Respan 发布 P-1 隐私模型,PII 检测 F1 全面超越 AWS — CodeByPoonam · 2026-09-04
- Codex 中发现 gpt-6-astra 痕迹,下一代模型线索浮现 — drinksbeerdaily · 2026-09-04
- Gemini、Grok、Claude 集体宕机,与 OpenAI 新模型无关 — iiiaaa2022 · 2026-09-04
- 曝 OpenAI 今日发布 GPT-6-Astra,年内还有 Bel 再迎大跳级 — koltregaskes · 2026-09-04
- Meta Muse Spark 1.3 登顶 DeepSWE 编码榜,价格仅 Opus 5 的五分之一 — davidthesong · 2026-09-04
- 网友爆料:GPT-6 未发布内部已有更强后续模型 — flowersslop · 2026-09-04