手稿转写模型为何还在用 CER:作者详解评测取舍与 CATMuS 规范
wjb_mattingly · x · 2026-09-04
针对「CER 是否还是合理评测指标」的讨论,作者补充:其手稿转写模型的 CER 误差主要来自风格与拼写差异,属可理解范围;但 CER 在校验模型表现、让其符合 CATMuS 转写规范的过程中起了关键作用,只是如今指标确实变得更复杂了。
背景:这是 0.8B Qwen 3.5 在 2000+ 中世纪手稿(万页)上全量微调项目的后续讨论。
所属事件:0.8B Qwen 微调转写两千份中世纪手稿,CER 指标引争议(4 条相关)→
「研究」频道最新
- CMU 与 Meta 开源 TrackEverything:追踪长视频全部 3D 点 — AdamWHarley · 2026-10-21
- 开源婴儿脑连接工具包:vibe coding 串起皮层-电极-纤维追踪分析 — Dr_Alex_Crimi · 2026-10-21
- 伯克利获 Schmidt Sciences 资助:用 AI 破解抹香鲸与虎鲸语言 — begusgasper · 2026-10-21
- 斯坦福 CS336 第 6 讲:kernel 提速先少跑几趟显存 — stanfordnlp · 2026-10-21
- NVIDIA Cosmos3-H-Dreams:用生成式模拟让临床手术场景活起来 — Hugging Face Blog · 2026-10-21
- UIUC 论文:高分不等于会推理,LLM 换个表述就丢失推理规则 — UIUC-CS · 2026-10-21