Helix World 官方详解:为何交互世界模型必须原生带空间立体声
lmoroney · x · 2026-10-17
这是 Helix World 发布帖的链接展开版,附 noiz.ai 官方介绍全文,补充了设计动机:
- 为什么世界模型需要声音:多数交互世界模型是无声的,而声音携带画面之外的信息——材质、碰撞力度、画外发生的事件;沉浸场景里转头应带动左右耳声音变化
- 级联方案不可行:先视频后音频的模型看不到相机轨迹和用户操作,声音不含自我运动信息,且级联增加延迟,因此 Helix World 选择音视频联合生成
- 性能数据与开源信息同前帖:H800 单卡 24 fps、RTF 0.77、WBench 79.9、HelixBench 41.8 对 EchoWM 12.7;代码、权重、论文与公开 demo 均已放出
所属事件:Noiz AI 联手港科大开源视听世界模型 Helix World(2 条相关)→
「多模态」频道最新
- 一套 Opus 提示词自称值 400 美元/小时动效设计师 — minchoi · 2026-10-17
- 两句话提示让 Codex 产出 3 分钟机器人民俗恐怖短片 — BotLordBotflix · 2026-10-17
- 实测泼冷水:Qwen Image 2.1 图像编辑不及 MiniMax — Disastrous-Agency675 · 2026-10-17
- 用 MiniMax H3 拼长片:末帧接续为何越拼越崩 — carmidian · 2026-10-17
- Qwen 2.1 太大:3060 12GB 跑一张图要 90 分钟 — Helpful-Chemistry171 · 2026-10-17
- ComfyUI 升级弄崩 Wan 2.2 工作流,回滚也报错 — Backsterrr · 2026-10-17