Intel 发布 PolyRoute:12 语言+混杂语码路由基准,13 系统最佳微调达 96.6%
Mohammed Nayeem Khan · hf · 2026-11-12
Intel 团队发布 PolyRoute,一个面向「类型化决策路由」(typed-decision routing)的多语言基准:322 条 12 种语言、9 种文字系统的母语支持消息,外加 156 条混杂语码/罗马化消息(Hinglish、Spanglish、Arabizi),967 条可选母语训练行,以及一个三路部门路由决策协议。
数据与质检:标签来自 Qwen3.8-27B 加盲二次审核(91% 候选保留);独立模型 gemma4-31b 在 97.2% 测试项上与标签一致;测试与训练文本的最大字符 5-gram 相似度仅 0.33。
13 个系统的榜单结果:英文底座 checkpoint 61.2%,发布版多语言 checkpoint 77.3%,最佳微调 96.6%;TF-IDF+逻辑回归竟达 91.9%。在 4 个保留语言上三个多语言系统得分 77%/90%/93%;在混杂语码上英文底座(85%)名义上领先多语言版(79%,p=0.134)。该划分只能区分约 4 分以上的差异。所有文本与标签均为 LLM 生成。
「研究」频道最新
- Latent Sparse Attention 用聚类索引 KV，比全注意力快 70 倍 — bendee983 · 2026-11-12
- Flash ALOHA 发布：50 条演示学会近人类速度精细操作 — Thom_Wolf · 2026-11-12
- 浙大小红书等发布 CARTBench：复杂购物建议评测，无一模型超 45% — Yuqin Dai · 2026-11-12
- 数学基准新成绩单曝光:GPT-6.1 Sol 90.43% 居首,低成本模型表现亮眼 — teortaxesTex · 2026-11-12
- e-means 聚类算法提速 10-45 倍，1.4 个 epoch 就击败 k-means — pmttyji · 2026-11-12
- 研究称 LLM 性别偏见普遍存在且模型间差异显著 — ValerioCapraro · 2026-11-12