Skywork 开源 Matrix-Game 4.0:游戏引擎管物理,模型只画像素
lmoroney · x · 2026-10-16
昆仑万维 Skywork 开源 Matrix-Game 4.0：将可执行游戏引擎与因果、少步数的视频模型配对。引擎负责玩法、物理与玩家输入，模型则从引擎的低多边形 RGB 画面流式生成精细帧；HUD 与音效作为独立的帧对齐层保留。
关键信息：
- 首发三个场景模型：中世纪城堡、古埃及（第三人称射击）与城市赛车（驾驶）
- 推理代码、浏览器 demo 与游戏源码公开，场景权重与素材在 Hugging Face 以 Apache-2.0 发布
- 每个场景 checkpoint 约 50 亿 BF16 参数；同日发布 RTX 5090 优化路径（FP8 线性层、融合 kernel、CUDA graphs）
- 模型卡坦诚局限：渲染器专用于所供场景，未见几何或长时间会话会出现外观漂移，神经输出不影响碰撞与玩法
作者还建议了一个教学演示玩法：打开一个场景玩两分钟，然后并排观看低模录像与神经渲染，标出两者漂移之处——那个差距就是全部知识点。
所属事件:昆仑万维开源 Matrix-Game 4.0：单张 RTX 5090 实时跑世界模型(5 条相关)→
「多模态」频道最新
- AI 重制版《霹雳游侠》走红,马斯克与 Lex Fridman 担纲主演 — bennash · 2026-10-16
- ImageNet 该退休了:ImageNet 与文生图方法排名相关性为负 — YouJiacheng · 2026-10-16
- 开源 anatomy-reveal skill:把 Claude 变成产品拆解动画工作室 — msharmas · 2026-10-16
- 实测结论:Flux 3 Klein 不如上一代,Base 版被评「几乎不可用」 — Both-Rub5248 · 2026-10-16
- 中科大团队提出 Speculative Sampling，交互式视频生成延迟大降 — ustc · 2026-10-16
- 80万 Gaussian Splat 跑在 WebGPU，a16z 合伙人称可近无限扩展 — generativist · 2026-10-16