OPTIC 实现逐层嵌入千倍压缩,性能几乎无损

Jiacheng Liu · hf · 2026-10-27

HF 上发布的 OPTIC 方法针对逐层嵌入(per-layer embeddings)做极限压缩:用 token 共享的索引码本加各层专属的仿射解码器,按输出路径拟合残差,从而在冻结主干的情况下重建各层嵌入。

从配图曲线看,在约 1000 倍实际驻留字节压缩比下,OPTIC 仍保留约 85% 性能,而 PQ、OPQ-P 等基线在 100–500 倍区间已掉到接近零;推理开销极小。

原文链接 →

「Infra」频道最新

更多「Infra」频道 AI 资讯 →