Abstract

恶劣天气条件常常会损害捕获图像的质量，不可避免地影响到先进驾驶辅助系统（ADAS）和自动驾驶的尖端目标检测模型。

在本文中，我们提出了一个有趣的问题——图像恢复与目标检测的结合能否在恶劣天气条件下提高检测性能？

为了解答这个问题，我们提出了一种有效的架构，将图像去雾和目标检测通过引导信息和任务驱动学习相结合，以实现有利于检测的去雾，称为FriendNet。

FriendNet旨在提供高质量的感知和高检测能力。与现有的直观地将图像去雾视为预处理的努力不同，FriendNet在这两个任务之间建立了正相关关系。

去雾网络生成的干净特征有助于提升目标检测性能。相反，目标检测在任务驱动学习方案下对图像去雾网络的学习过程起到了关键指导作用。

我们阐明了如何在考虑网络架构和学习目标的情况下，利用下游任务来指导上游去雾过程。

我们设计了引导融合块（GFB）和引导注意块（GAB），以促进检测信息的网络整合。

此外，检测任务损失的引入有助于优化过程的细化。

我们还引入了一个新的基于物理的特征增强块（PFEB），它集成了基于物理的先验知识以增强特征提取和表示能力。

大量在合成和真实数据集上的实验表明，我们的方法在图像质量和检测精度方面优于现有的最先进方法。

【arXiv 2024】FriendNet：Detection-Friendly Dehazing Network