Kimi k3 被赞有真实架构创新，加入 residual attention
OwariDa · x · 2026-07-26
转发内容称，Kimi k3 不只是做了蒸馏，还在架构上塞进了真正有意思的创新，比如 attention on layer residuals。作者的观点是：相比只做能力包装，能把真实架构改进做出来并公开出来，对整个行业更有价值。
所属事件:Kimi K3架构创新引热议，DRAM需求下降遭质疑(5 条相关)→
「模型」频道最新
- XMihura 称 GLM 5.2 已强于 Opus 4，崩溃论被证伪 — yacineMTB · 2026-07-26
- OpenAI 与 Claude 同日推语音更新,却被嫌不够旗舰 — FinanceYF5 · 2026-07-26
- 配图直接出现 Grok 4.5，疑似 xAI 新模型预告 — tetsuoai · 2026-07-26
- 用户称 Claude Opus 5 解决了 Codex 5.5 找不出的 bug — It-zubair-huss · 2026-07-26
- Grok 4.5 被吹成一人游戏工作室，能写代码也能做测试 — FinanceYF5 · 2026-07-26
- Yishan 说切回 OpenAI 后 Codex-5.5 和 5.6 已够用 — yacineMTB · 2026-07-26