LlamaIndex 发布 OCRia-1 遭质疑:olmOCR 榜单统一渲染算公平吗
IgorCarron · x · 2026-10-23
LlamaIndex(jerryjliu0)发布文档解析 VLM「OCRia-1」,宣称在精度、成本、延迟上均达 SOTA:ParseBench 87.4,第三方榜单 olmOCR-bench 83.5(表格 92.9)、PulseBench-Tab 84.1、fr-bench-pdf2md 72.1。强项是复杂表格(嵌套表头、合并单元格、扫描件)和复杂图表解析。
但发布随即遭质疑:olmOCR-bench 成绩是「基于所有模型统一 1288px 渲染调整后」的数字,转发者 @staghado 吐槽「这就像消融实验里所有模型用同一个学习率然后宣称公平」——统一降采样可能不利于原生高分辨率模型,榜单口径争议值得留意。
所属事件:LlamaIndex 发布 4B 文档解析模型 OCRia-1(4 条相关)→
「模型」频道最新
- Codex 多会话互聊被曝光:不用空格,仍用破折号句号 — burkov · 2026-10-23
- MalwareBench 发布:恶意软件逆向首个端到端基准,GPT-6.1 仅得 4.42% — brianryhuang · 2026-10-23
- MedSAM/EchoJEPA 亮相 Meta 开放科学峰会:通用模型改写医疗 AI — BoWang87 · 2026-10-23
- 安全审查难倒从业者:本地跑 DeepSeek 比进大厂可信网络安全项目还容易 — max_paperclips · 2026-10-23
- 本地量化实测:129GB Qwen3.8 Flash 满分击败 390GB DeepSeek V4.1 — whiteh4cker · 2026-10-23
- 用户观察:Codex 上下文压缩速度明显变快 — Angaisb_ · 2026-10-23