FlexGlue:稀疏到稠密特征匹配,速度与精度兼得并可甄别误配图像对
zhenjun_zhao · x · 2026-10-27
ETH Zurich 的 Philipp Lindenberger、Paul-Edouard Sarlin、Marc Pollefeys 等发布 arXiv 论文 FlexGlue,可视为 LightGlue 的稀疏-稠密扩展(作者自述 tl;dr:LightGlue + pair-level covisibility)。
要解决的问题:稀疏兴趣点匹配快但受关键点重复性限制;稠密像素网格匹配稳健但昂贵;且两者只用匹配对训练,遇到视觉上高度相似的无关图像对(如重复纹理)常无法拒绝,这在 SfM 中很关键。
方法:给定两张图和第一张图中点的坐标,FlexGlue 用 CNN 编码稠密 token、Transformer 融合上下文,先判断图像对是否可匹配(不可匹配即提前退出),再通过特征插值、稠密相关与匹配精修,在稠密像素中搜索少量对应点实现亚像素级定位。
结果:
- 在 MegaDepth-1500、ScanNet-1500 等基准上推进了相对位姿估计的 Pareto 前沿,精度接近稠密匹配器但耗时仅其一小部分(如提取+匹配约 31ms vs RoMa 239ms);
- SfM 与视觉定位显著优于现有方法,在含干扰物的 IMC2025 上重建质量领先且不超时;
- 甄别「doppelganger」错误图像对的能力最强,在 LaMAR 上 AUROC 比专用方法高约 10 个点,吞吐量也更高;跨域(地面-航拍等)匹配精度最高。
代码已开源。
「研究」频道最新
- AISI:80 美元算力微调即可绕过开放生物模型的数据过滤 — connoraxiotes · 2026-10-27
- RFD4-Proteina 跑在 RTX 3060 上:单次蛋白设计最低约 $0.001 — AllThingsApx · 2026-10-27
- 弗莱堡生成智能实验室通过 ELLIS 项目招收多名全奖博士,10月31日截止 — yuyinzhou_cs · 2026-10-27
- Nature Physics 论文:可重构折射率实现对多模波传播的任意控制 — MarioKrenn6240 · 2026-10-27
- Wakaru 开源 ontologize:用模型激活为数据集自动生成本体标签 — amplifiedamp · 2026-10-27
- EMNLP Oral 论文用跨层转码器揭示 LLM 多语言共享表征机制 — ZhijingJin · 2026-10-27