FrameMorrow:用「未来 token」选历史帧,长视频生成即插即用

NationalUniversityofSingapore · hf · 2026-10-05

南洋理工大学提出 FrameMorrow,解决长时程视频生成中历史帧选择问题:现有方法按当前内容判断历史相关性,但对当下不重要的信息未来可能变得关键。

方法:预测一小组「前瞻 token」来表示未来信息需求,用它从历史中挑选相关显式帧——只选显式帧而非模型内部状态,因此即插即用,可接入闭源生成器,额外推理成本很小。

结果:在 5 个基准、11 个生成模型上评测(覆盖长视频生成、交互式生成、动作条件世界模型),长程一致性、视觉质量与动作对齐均有一致提升。

原文链接 →

「多模态」频道最新

更多「多模态」频道 AI 资讯 →