338 页私密 OCR 评测:0.8B 小模型登顶,3B 级仅列第 4 和第 7
vanstriendaniel · x · 2026-11-10
作者与 agent 用 ocr-bench 对 9 个开源权重 OCR 模型在 338 张 20 世纪扫描政府文件上做了私密评测:VLM 评判模型对转写结果两两对比,共 10,730 次。
- 前两名都是小模型:LightOnIO OCR-3-0.8B 与 TII 的 Falcon-OCR(仅 270M)
- 两个 3B 级模型仅排第 4 和第 7,「更大并不更好」
- 运行方式很关键:Unlimited-OCR-2 加上 tiling(切片)后评分提升约 130 分
- 页面保持私密,只有评分公开;作者提醒评判模型仅基于 19 世纪书籍 ground truth 校验,未在同类页面上验证
作者提供了完整教程,并呼吁更多人搭建自己的私密 OCR 评测,而非依赖公开基准。
所属事件:338 页政府扫描件 OCR 私评测:0.8B 小模型夺冠(2 条相关)→
「模型」频道最新
- Kaggle 私榜启示:呼吁 AI 模型评测也该有「揭榜时刻」杜绝挑优 — MeganRisdal · 2026-11-10
- 六款免费开源模型分工指南:从日常写作到公司服务器各有所属 — alex_verem · 2026-11-10
- xAI 七款 Grok API 模型默认加隐形水印,11 月 7 日起生效 — thione · 2026-11-10
- 月之暗面开源 Kimi K3.1 Pro:2.8T 参数多模态 Agent 模型,百万 token 上下文 — thione · 2026-11-10
- OpenAI 向获批准的安全团队开放 GPT-6 Cyber,扩展漏洞利用能力 — thione · 2026-11-10
- 转推声称:GPT-4 级别智能的运行成本已缩小约 1800 倍 — CatAstro_Piyush · 2026-11-10