按 loss 排序看样本头:找标注错误的实用一手技巧
antoine_chaffin · x · 2026-09-20
接前一条关于人工标注噪声的讨论,Antoine Chaffin 补充一手经验:把样本按 loss 排序、看头部,总能发现有意思的东西;他每做完一次评测的第一件事就是看几个失败案例,判断到底是该修的真失败,还是标注错误。
所属事件:Qwen 研究员称人工标注噪声或高于自动标注(2 条相关)→
「研究」频道最新
- USC 学者：推理模型进展疯狂但前沿参差，仍有诡异短板 — jasondeanlee · 2026-11-12
- Guidelight AI 发布 10 类 AI 失准行为分类,供开发者监测上报 — sjgadler · 2026-11-12
- CoRL 2026 双线叙事:报告里遥操作正消失,展台人形仍靠人拉线 — jonstephens85 · 2026-11-12
- 测试显示 Qwen3-8B 能把动作词映射到正确身体部位 — Sauers_ · 2026-11-12
- AI 数学形式化路线之争：多线并行试错好过押注单一路径 — xennygrimmato_ · 2026-11-12
- 蛋白质结构预测 Agent 实操:让模型自动选最优预测工具并越用越聪明 — nlarusstone · 2026-11-12