INCLUDE-2.0 发布:91 种语言 86 国本地考题检验模型地域知识
ABosselut · x · 2026-10-26
INCLUDE-2.0 正式发布,是一个扩展版多语言基准,用来自 91 种语言、22 种文字、86 个国家的本地考试题目,评估模型对各地区事实性知识的掌握。
该基准在 EMNLP 上有 Oral 报告,由 Maria Grandury 团队呈现,聚焦以往评测较少覆盖的区域性知识而非通用语言能力。
「研究」频道最新
- Nature 子刊 fMRI 基础模型疑造假:PubPeer 匿名者用 seed 42 实锤 — bttyeo · 2026-10-26
- Reddit 用户从零学 RL,发布一页纸基础笔记站 neatrl — East-Muffin-6472 · 2026-10-26
- 研究发现 token embedding 对 value 向量贡献远超表象 — RichmanRonald · 2026-10-26
- 开发者提出「神经光学流」:参数化传统 CV 电路加速神经网络收敛 — mike64_t · 2026-10-26
- 生物 AI 老兵反驳「无限算力可解决生物学」：瓶颈是数据不是算力 — iScienceLuvr · 2026-10-26
- 新研究：不同任务会把神经网络权重拉向权重空间中不同聚类 — wschroll · 2026-10-26