TifinaghBench 上线：主流模型理解阿马齐格语最高仅 29.9 分
gekobraa · x · 2026-11-01
ItriCloudLabs 发布了 TifinaghBench,测试 AI 是否真正理解北非阿马齐格人(Amazigh)的语言。首批对 8 个模型在 3 种语言变体上进行排名,最高分仅 29.9/100,暴露出主流大模型对低资源语言的严重短板。
团队正在测试更多模型,排行榜会持续更新,定位为长期项目而非一次性研究。
「研究」频道最新
- 斯坦福 VERDICT 临床试验匹配论文获 EMNLP 2026 杰出论文奖 — stanfordnlp · 2026-11-01
- MIT 团队分析 3172 家美式中餐馆中英文名的系统性差异 — stanfordnlp · 2026-11-01
- 斯坦福团队 UIST 2026 发表 GUIDE：生成式体验用于数字心理健康干预 — stanfordnlp · 2026-11-01
- 比尔·盖茨播客对话 Yejin Choi,聊 AI 训练系统与 AI 科学 — stanfordnlp · 2026-11-01
- 研究者探讨 LLM 分层机制：persona 由哪些层决定仍待解 — maxsloef · 2026-11-01
- QwenPU:在 Qwen 3.5-4B 权重里编 NPU,跑 Karpathy 的 stories260K — LatentSpacer · 2026-11-01