InfraNet 让红外主导,教 RGB 何时闭嘴
新智元 · wechat · 2026-07-26
- 北航等团队提出 InfraNet,目标是做更鲁棒的 RGB-IR 红外目标检测。
- 论文指出,RGB 在低照度、雾天、强逆光、恶劣天气下可能严重退化,若与红外盲目融合,反而会把噪声带进检测过程。
- InfraNet 采用 IR-centric 设计:红外分支做主路径,RGB 只作为训练阶段受控的辅助信号。
- 核心模块 QualGate 负责判断什么时候压制不可靠的 RGB 引导,什么时候增强红外特征。
- 这个框架同时支持 RGB-IR 推理和 IR-only 部署,适合现实中 RGB 质量不稳定的场景。
- 论文在 LLVIP、FLIR-Aligned、M3FD、DroneVehicle 等基准上给出不错结果。
- 文章的结论很明确:多模态感知的关键不只是“融合更多信息”,更是“知道什么时候该相信哪种模态”。
「多模态」频道最新
- Reddit 展示一段 AI 生成的健身操视频 — fox-and-grapes6732 · 2026-07-26
- LingBot-World 2.0 发布 14B 交互世界模型 — WorldofAI · 2026-07-26
- Fable 把塞尚风城市建造成了可试玩手势游戏 — emollick · 2026-07-26
- Opus 5 被称 3D 表现惊艳,但并非全能更强 — TAbrodi · 2026-07-26
- 横滨街景用 1018 张照片重建成 400 万点 3DGS — janusch_patas · 2026-07-26
- AI 图像工具开始擅长把复合照片改成新构图 — RachelVT42 · 2026-07-26