众包 3456 条难题击穿 SOTA 翻译模型,Last Translation Benchmark 发布
zouharvi · x · 2026-09-04
Last Translation Benchmark 论文正式发布:通过大规模众包收集了 3456 条独特的困难翻译样例,均能击穿当前最先进的翻译模型,可用于更可靠的翻译评测。论文指出主流翻译基准已饱和、评测指标不可靠或难以扩展,因此转向「能证明让模型出错」的样例集,覆盖文本、图像、音频、视频多模态输入。
- 数据集 LTBv1 共 3456 条样例(90MB),已上线 arXiv 与 Hugging Face 排行榜
- 持续开放贡献:提交可验证的困难样例并给出自动 pass/fail 规则,获批 10 条以上可成为 live paper 共同作者
- 项目持续滚动更新数据集与论文版本,代码托管在 GitHub
所属事件:机器翻译远未解决:Last Translation Benchmark 众包 3456 条难题击穿 SOTA(3 条相关)→
「研究」频道最新
- Gemini 数小时破解悬置 59 年的核聚变磁场数学猜想 — DynamicWebPaige · 2026-10-21
- CMU 与 Meta 开源 TrackEverything:追踪长视频全部 3D 点 — AdamWHarley · 2026-10-21
- 开源婴儿脑连接工具包:vibe coding 串起皮层-电极-纤维追踪分析 — Dr_Alex_Crimi · 2026-10-21
- 伯克利获 Schmidt Sciences 资助:用 AI 破解抹香鲸与虎鲸语言 — begusgasper · 2026-10-21
- 斯坦福 CS336 第 6 讲:kernel 提速先少跑几趟显存 — stanfordnlp · 2026-10-21
- NVIDIA Cosmos3-H-Dreams:用生成式模拟让临床手术场景活起来 — Hugging Face Blog · 2026-10-21