Jet-Long 长上下文扩展方法

nvidia · hf · 2026-07-10

NVIDIA 提出 Jet-Long,一种用于大模型长上下文扩展的零样本高效方法。它通过动态调整缩放因子和双焦点注意力机制,在不同序列长度下维持较高性能。

原文链接 →