基于 Dolma 构建 470 亿泰语词元,8B 模型超越 Llama

billhilf · x · 2026-08-27

泰国和新加坡的研究人员适配了 AllenAI 的 Dolma 数据管线,构建了名为 Mangosteen 的 470 亿词元泰语语料库。基于此持续预训练的 8B 模型在泰语基准测试中表现优于 Llama-3.1 8B。团队公开了管线、语料库和检查点,展示了开源 AI 生态如何赋能特定语言社区。

所属事件:Ai2 助力泰国团队构建 470 亿 token 泰语语料库(3 条相关)→

原文链接 →

「模型」频道最新

更多「模型」频道 AI 资讯 →