LightVAE 视频解码提速 2.24 倍,VBench 分数保留 99.5%
Shiqiao Gu · hf · 2026-10-14
商汤等机构提出 LightVAE,一个针对视频 VAE 的压缩加速框架,解决视频扩散模型中编解码开销大的问题。
- 核心思路:将因果 Conv3D 精确重参数化为「聚合空间响应 + 差分驱动时间校正」,并按两者不同的压缩敏感度分别处理——时间低秩压缩(TLR)只对时间校正分支做低秩近似
- 配合保宽块剪枝和冻结教师后缀引导的 probe-guided 特征对齐来恢复压缩后的质量
- 在 Wan VAE 上:H100 解码吞吐达 SOTA 高效解码器的 2.24 倍,RTX 5090 上 1.11 倍,且 DAVIS PSNR 更高、LPIPS 更低
- 在 MiniMax-H3 上:解码吞吐最高提升 2.97 倍,仍保留原模型 99.51% 的 VBench-2.0 总分
代码已开源(ModelTC/LightVAE)。
「Infra」频道最新
- 光子训练 1B GPT-2:绕过反向传播的 DFA 光学预训练登上 PNAS — IgorCarron · 2026-10-14
- 哈密—重庆特高压通电:16ms 送绿电 2000 公里喂 AI — 96Stats · 2026-10-14
- 关键 API 从 Node 迁到 Bun:p99 延迟降 80%,内存省 63% — DanielLockyer · 2026-10-14
- Agent 流量难倒推理服务器:长前缀缓存命中决定成本 — rohanpaul_ai · 2026-10-14
- 轨道数据中心没有物理断电开关,Reddit 热议 AI 安全悖论 — Zappy_Oh · 2026-10-14
- 小红书 Dots 提出 MSAR:等损失下训练算力提速 1.58 倍 — teortaxesTex · 2026-10-14