多光谱互补特征融合 | DPDETR在目标检测领域的突破性进展 ！

文章预览

红外可见目标检测旨在通过利用红外图像和可见图像对互补信息来实现稳健的目标检测。然而，现有的模式错位问题提出了两个挑战：将错位互补特征融合在一起是有困难的，现有方法在错位条件下无法准确地定位两种模式中的物体。 在本论文中，作者提出了一种解耦位置检测 Transformer （DPDETR）来解决这些问题。 具体来说，作者明确地定义了物体类别、可见模式位置和红外模式位置，使网络能够学习这两种模式之间的内在关系并输出两种模式中物体的准确位置。为了准确地融合错位物体特征，作者提出了一种解耦位置多光谱交叉注意力模块，可自适应地采样和聚合多光谱互补特征，同时受到红外和可见参考位置的限制。 此外，作者设计了一种 Query 解耦多光谱解码器结构来解决作者任务中三种物体信息优化之间的差距，并提出了一种解耦位置对 ………………………………