全页手稿转写时代，CER 为何失效：从行级 CRNN 到整页布局决策
vanstriendaniel · x · 2026-09-04
vanstriendaniel 解释了 CER 指标的失效逻辑：过去 CER 适合行/词级评测，因为 CRNN+CTC 模型词表固定、无格式、无阅读顺序和版面问题，几乎没有约定可争议；而如今任务是整页转写，模型要做几十种风格决策，而十年前的 ground truth 只采用其中一种写法，CER 会把所有这些差异都计为「阅读错误」。如果基准仍在行/词级，CER 还有部分适用空间。
这是中世纪手稿转写模型评测讨论的延续，作者也提到这是在评测稀缺领域对既有方法的务实沿用，未来会尝试其他评测方案。
所属事件:0.8B Qwen 微调转写两千份中世纪手稿，CER 指标引争议(4 条相关)→
「研究」频道最新
- CMU 与 Meta 开源 TrackEverything：追踪长视频全部 3D 点 — AdamWHarley · 2026-10-21
- 开源婴儿脑连接工具包:vibe coding 串起皮层-电极-纤维追踪分析 — Dr_Alex_Crimi · 2026-10-21
- 伯克利获 Schmidt Sciences 资助：用 AI 破解抹香鲸与虎鲸语言 — begusgasper · 2026-10-21
- 斯坦福 CS336 第 6 讲:kernel 提速先少跑几趟显存 — stanfordnlp · 2026-10-21
- NVIDIA Cosmos3-H-Dreams：用生成式模拟让临床手术场景活起来 — Hugging Face Blog · 2026-10-21
- UIUC 论文：高分不等于会推理，LLM 换个表述就丢失推理规则 — UIUC-CS · 2026-10-21