昆仑万维开源Matrix-Game 4.0:一张RTX 5090实时跑游戏世界模型
量子位 · wechat · 2026-10-15
昆仑万维Skywork AI发布Matrix-Game 4.0，称其为全球首款可在单张消费级显卡上实时运行的游戏世界模型，并已开源模型与代码。
核心思路：引擎跑规则、视频模型画画面
- 与谷歌Genie让视频模型隐式记忆世界不同，团队认为「世界能逛」不等于「游戏能玩」，规则脱缰比画面穿帮更致命。
- 分工方式：Coding Agent把自然语言写成游戏代码；游戏引擎维护世界状态、执行规则并输出结构草图；视频模型照草图实时补全材质光影。
- Demo中盾牌耐久、血量结算、任务胜负全部由代码确定，还可用自然语言让Coding Agent改写游戏规则（如计时赛改追击战）。
单卡跑起来的工程手段
- 用UE5制作「结构画面-精细画面」成对数据训练模型照图画；动态Caption告诉模型画面里是什么。
- 基于Wan2.2 5B Fun Control改造V2V模型，引入空间记忆参考图、首帧与近期历史缓存。
- 少步自回归蒸馏压缩到1-2步去噪，一次生成四帧，配合CUDA Graph、FP8融合算子、KV环形缓存。
- 单步去噪稳态83FPS，实际游戏60FPS，按键到画面响应约112ms；对比英伟达同路线的StreamRender-H3（8张GB200、端到端约545ms）门槛大幅降低。
目前画质仅480p，但团队从1.0起持续开源，认为世界模型技术路线尚未收敛，开源能让社区验证与扩展。
所属事件:昆仑万维开源 Matrix-Game 4.0：单卡 5090 实时跑世界模型(3 条相关)→
「模型」频道最新
- StartLux-Decision 发布:RL 训练的校准决策模型,27B 得分 72.8 — startlux-models · 2026-10-15
- Meta Muse Code 用量遭吐槽：5 小时额度仅剩 21% — ThomasScialom · 2026-10-15
- Claude Code 报错截图现「Fable 5.1」与「Opus 5」字样,疑为新模型露出 — adonis_singh · 2026-10-15
- 谷歌推出 Deep Review:每周免费两篇论文审稿,由 Gemini 4 Argon 驱动 — JeremyNguyenPhD · 2026-10-15
- 曝 Grok Voice 3.0 上车特斯拉，日处理数百万次车内语音对话 — XFreeze · 2026-10-15
- Gemini 4 Argon 编码风格实测：爱加整洁单行注释，代码好不好跑难说 — zacharynado · 2026-10-15