Camellia 基准发布:覆盖 9 种亚洲语言测量 LLM 文化偏见
Tanmoy_Chak · x · 2026-10-26
- 研究团队发布 Camellia 基准(arXiv 2025),用于测量 LLM 在亚洲语言中的实体级文化偏见,代码已在 GitHub 开源(MIT 协议)。
- 覆盖 9 种亚洲语言(中、日、韩、越、乌尔都、印地、古吉拉特、马拉雅拉姆等)与 6 种亚洲文化(中、日、韩、越、巴基斯坦、印度)。
- 数据集包含两类资源:entities 目录收录 6 类实体并标注其与各亚洲文化或西方文化的关联;contexts 目录提供三种掩码上下文,其中 camellia-grounded 为文化扎根语境。
- 目标是检验 LLM 在非西方语言/文化语境下的偏见表现,弥补现有偏见基准偏重英语与西方文化的不足。
「研究」频道最新
- 复旦×腾讯推出 DraMaze：用演化树搜索破解短剧剧本套路化 — Siyang He · 2026-10-26
- 阿里淘宝团队发布 MultiAgent-OPD：策略内蒸馏端到端训练多智能体 — TaoLiveAIGC · 2026-10-26
- LoCA 两阶段对齐让地理编码器吃进多模态影像与元数据 — Panagiotis Koromilas · 2026-10-26
- Hugging Face 员工预告「决策模型」一站式指南即将发布 — ariG23498 · 2026-10-26
- FlowHMR 开源:单目视频生成物理合理动作捕捉,LLM Agent 全流程自动化 — Scobleizer · 2026-10-26
- INCLUDE-2.0 发布:91 种语言 86 国本地考题检验模型地域知识 — ABosselut · 2026-10-26