Datalab 发布开源 OCR 基准 OmniParseBench
Datalab(Vik Paruchuri 团队)发布公开 OCR 基准 OmniParseBench,提供 16288 项通过/失败式测试,数据与打分代码全部开源,并且自曝自家产品在该基准上并未排名第一,这在普遍自夸式基准发布中颇为少见。
已确认
- 基准规模:来自 2343 份文档、2937 页,覆盖 92 种语言,共 16288 项通过/失败测试,打分方式统一、可解释。
- 覆盖场景:手写体、表格、多语言、数学公式、表单等 OCR 边界难点。
- 发布动机:Vik Paruchuri 表示团队使用 olmOCR-bench 一年多,认为它是该领域最公平一致的基准,但如今已饱和——剩余提升多来自匹配其输出格式,而非真正的阅读能力提升。
- 承诺持续更新测试用例,以追踪领域进展。
为什么重要
- 通过/失败式打分比模糊评分更可审计,数据与代码开源利于复现。
- 覆盖手写、公式等长期痛点场景,可作为观察多语言 OCR 进展的持续标尺。
- 发布方主动披露自家产品未登顶,提升了基准的中立性与可信度。
2026-10-10 ~ 2026-10-10 · 5 条相关
一手来源
- Datalab 发布 OmniParseBench:16288 项 OCR 测试自曝未登顶 — VikParuchuri ·
- olmOCR-bench 已饱和:Datalab 推出可审计的 OmniParseBench — VikParuchuri ·
- OmniParseBench 发布:覆盖手写/表格/公式等 OCR 边缘场景 — VikParuchuri ·
- 【源头】Datalab 发布 OmniParseBench:16288 项 OCR 测试自曝未登顶 — VikParuchuri · 2026-10-10
- 【源头】olmOCR-bench 已饱和:Datalab 推出可审计的 OmniParseBench — VikParuchuri · 2026-10-10
- Vik Paruchuri:olmOCR-bench 已饱和,涨分靠对齐格式 — VikParuchuri · 2026-10-10
- OmniParseBench 覆盖手写、表格、多语言等 OCR 边界场景 — VikParuchuri · 2026-10-10
- 【源头】OmniParseBench 发布:覆盖手写/表格/公式等 OCR 边缘场景 — VikParuchuri · 2026-10-10