SmolVLM 曾因 bf16 精度丢失 patch 坐标,生成图变成错位马赛克

LysandreJik · x · 2026-10-22

Hugging Face 的 smolvlm 团队（molbap）分享一个隐蔽 bug：在 CI 中，图像 patch 坐标被转换为 bf16 时精度丢失，patch 落进了错误的位置桶，模型「看到」的图像实际是错位拼接的碎块（配图展示自由女神像被切成错位网格）。由于生成结果只是「稍微有点不对」，自动化测试和 agent 都没发现，直到有人类觉得「这图是不是有点怪」。教训：数值精度问题在视觉管线中可能只造成微妙异常，人工抽检仍不可替代。