Qwen 研究员称人工标注噪声或高于自动标注

Qwen 多模态研究员 Antoine Chaffin 提出,阅读近期关于人类标注数据集的论文可以发现,人工标注中的噪声和错误可能比先进的自动标注技术更严重,真正有效的做法是进行迭代。他还分享了一手实践经验:将样本按 loss 排序并查看头部,总能发现有价值的问题;他每次完成评测后的第一件事就是检查几个失败案例,以此定位标注错误。

2026-09-20 ~ 2026-09-20 · 2 条相关