腾讯混元 Hy4 flash 将办 Reddit AMA,KV 缓存成本宣称骤降 24 倍

linjing219 · reddit · 2026-11-20

腾讯混元 Hy4 / Hy4 flash 团队(含 Shunyu Yao)本周五 8–10 AM PT 在 Reddit 举办 AMA。Hy4 flash 主打「12B 激活参数 + 1M 上下文」组合,团队宣称通过混合注意力 + LatentMoE + Engram,KV cache 降至 Hy4 的约 1/6、Hy3 的约 1/24,若属实将大幅改变长上下文高并发推理的成本结构。作者提醒:「单任务成本为 Hy4 的 1/20」目前仍属厂商宣称,尚无第三方复现,Artificial Analysis 也未收录。同时发布 instruct、FP8、Base 三个 checkpoint;Base 版 MMLU-Pro 71.1 低于 Hy4 Base 的 73.9,但 C-Eval 升至 92.0,明显偏中文办公场景(WorkBuddy、文档、PPT)调优,通用能力取舍仍有待验证。

所属事件:腾讯混元 Hy4 团队将在 Reddit 举办 AMA(4 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →