SAM 3.1+DINOv3 实时比对手术器械:相似度 0.82 判在位、0.77 报告异类

MaziyarPanahi · x · 2026-10-05

作者拆解了一个用视觉模型监控手术器械托盘的方案如何工作：SAM 3.1 在视频指定时间点对托盘进行分割，再用 DINOv3 对每个掩膜内的物体做特征比对。

具体做法与阈值：与骨凿(osteotome)最相似的一个外来物体得分 0.77，而托盘上本应在位的器械相似度均在 0.82 以上——以此区分“在位”与“异类”。视频以 5 倍速播放；被遮挡或出画面的器械不参与比对。