Wan-Streamer:视频即世界加事件流
Wan-AI · hf · 2026-07-17
Wan-Streamer v0.3:把视频看成“世界 + 事件流”
Wan-AI 发布 Wan-Streamer v0.3,用一个统一视角重构其实时流式交互模型:视频 = 稳定的世界 + 随时间变化的事件流。这里的“世界”包括环境、场景、人物、声音等相对稳定的上下文;“事件流”则是场景变化、人物动作、说话和其他声音等动态信息。
这个视角带来的训练目标
模型被训练成:给定一个世界和持续输入,实时预测这个世界如何变化、响应和推进。这样得到的能力可以迁移到多种实时下游任务。
具体落地
作者把它用于 实时全双工音视频交互:
- 输入是多模态用户内容
- 输出是语言形式的语音和行为动作
- 整体理解过程更像 vision-language-action 的实时版本
性能/系统指标
- 分辨率:640x368
- 帧率:25 FPS
- 流式单元:160 ms
- 模型侧响应延迟:约 200 ms
- 双向网络预算 350 ms 下,总交互延迟约 550 ms
这说明它不是纯概念展示,而是强调实时交互栈。
「多模态」频道最新
- 29 美分用 Dreamina Seedance 伪造大坝灾难「幕后花絮」 — Standard_Spell5873 · 2026-10-27
- Reddit 求助:Qwen Image 2.1 换装总毁身材比例,Flux 3 Klein 略好 — Existing-Box-7866 · 2026-10-27
- ComfyUI 打造跨场景一致角色:RealVisXL V5 加 img2img 面部参考 — MiaLarsonJL · 2026-10-27
- 29 美分生成迈克尔·贝式屋顶大片,Seedance 实测效果惊人 — PersonalSpace_4225 · 2026-10-27
- 3 步 Turbo LoRA 实测:Moss 图像模型极速出图效果展示 — JadedScorpion · 2026-10-27
- Magnific 预告 10 月 28 日上线新功能:「We're making it move」 — cuenca · 2026-10-27