动态多字节预测加速分层语言模型推理

ohiostate · hf · 2026-08-19

该方法通过可变长度窗口和因果注意力掩码生成并行字节,加速了字节级分层语言模型。在质量损失极小的情况下显著提升了推理速度。

原文链接 →

「研究」频道最新

更多「研究」频道 AI 资讯 →