研究者实测 DINOv3 patch 特征强编码位置信息
多位研究者实测发现,Meta 的 DINOv3 模型 patch 特征在默认情况下以极大程度编码了位置信息,PCA 可视化中呈现平滑的位置渐变色块。这一特性可能有助于部分论文的基准任务表现,但对真实场景应用并不友好。作者建议在实际使用前先对位置信息做清理(如剥离或归一化处理)再使用。
2026-11-22 ~ 2026-11-22 · 2 条相关
- 研究者实测:DinoV3 patch 默认编码位置信息过强,需清理再用 — StephanSturges · 2026-11-22
- DINOv3 patch 特征默认强编码位置信息,实测建议先清理再用 — StephanSturges · 2026-11-22