书籍转换工具作者实测:顶级视觉模型找不出网页转换瑕疵

burkov · x · 2026-10-03

ChapterPal 开发者 burkov 分享一手实测:他用 AI 把第三方 HTML 电子书转成自家交互格式,再人工滚动全书检查转换瑕疵。由于第三方书籍格式多达数百种,每条转换管道都会产生独特的转换问题(HTML 泄漏、本应 LaTeX 的公式变纯文本、未转义的美元符号、丢失的列表符号等)。

他本以为现在有视觉模型加能开浏览器滚动网页的 agent,可以让模型对比源页面和目标页面自动找瑕疵——而且他故意不举例说明瑕疵长什么样。结果每次新模型发布他都试,结论是这些模型始终不顶用:能发现缺词,但对泄漏的 HTML、格式错乱的公式、未转义字符、列表符号缺失等一律视而不见。

他借此吐槽:模型号称智能、ARC-AGI 刷分惊人,却连「网页看起来哪里不对劲」这种人类一眼能看出的问题都发现不了。

原文链接 →

「编程与Agent」频道最新

更多「编程与Agent」频道 AI 资讯 →