StreamRender-H3:游戏引擎管逻辑,扩散模型实时渲染可交互世界
songhan_mit · x · 2026-10-12
Sol-Engine 团队发布 StreamRender-H3,把 MiniMax H3 Ref2VA 后训练成实时流式神经渲染器,实现「代码跑世界逻辑、扩散模型生成画面」的可交互世界:
- 架构:游戏引擎负责物理、物体状态与玩家交互等世界状态;视频模型只负责视觉生成,中间用状态表示连接两者。改参考图和 prompt 即可让同一世界渲染出完全不同风格。
- 性能:8×GB200 GPU 上 2 步去噪、约 24 FPS、每 chunk 约 273ms;扩散渲染单步从 799.7ms 降到 218ms(3.67× 加速);自研 Fast Causal H3 VAE 在单张 GB200 上 23.8ms 解码 720p 双潜在帧。
- 技术栈:流式后训练、蒸馏、因果 H3 VAE 与全栈推理加速。已开源 demo 与代码。
「具身」频道最新
- 开源平价仿人机械手 Yeah Hand:套件仅约 217 美元 — CyberRobooo · 2026-10-12
- 让编程智能体写无人机代码:Fly-by-Code 从仿真飞进现实 — furongh · 2026-10-12
- 南洋理工 Artisan:多智能体管线生成物理合理的铰接 3D 资产 — nanyang-technological-university-singapore · 2026-10-12
- SuperNav:免微调的多模态模型智能体导航系统,通吃任意场景任务 — rsasaki0109 · 2026-10-12
- 父亲用 Claude Code 和树莓派为儿子打造实时 MLB 记分牌 — dtizzlenizzle · 2026-10-12
- 硅谷67家对比深圳36家:五张地图看全球机器人公司分布 — FinanceYF5 · 2026-10-12