Liquid AI 推出两款长上下文仍快的编码器

helloiamleonie · x · 2026-07-29

Liquid AI 发布了两款新的编码器:LFM2.5-Encoder-230M 和 LFM2.5-Encoder-350M。它们基于 LFM2.5 backbone 改造而来,关键变化包括:把 causal attention 改成 bidirectional attention,把短卷积改成 non-causal,并用 masked language modeling 目标训练。

官方强调,这一代编码器面向分类、检索、意图路由、安全过滤等常见 encoder 工作负载,重点是 长上下文仍然快,在 8,192 tokens 以内扩展更平缓;在 CPU 上,约 12–15 页、8k tokens 的文档编码时间可低于 30 秒。

所属事件:Liquid AI 发布 LFM2.5 双语编码器,主打 CPU 长文本(5 条相关)→

原文链接 →

「具身」频道最新

更多「具身」频道 AI 资讯 →