Relation DETR:探索明确的位置关系先验的目标检测(ECCV2024)

文章预览

点击下方 卡片 ，关注“ AI生成未来 ” 论文题目 Relation DETR: Exploring Explicit Position  Relation Prior for Object Detection 1、简介 本文提出了一种提高检测变压器收敛性和性能的一般方案。我们从一个新的角度研究了变压器的缓慢收敛问题，表明它是由自关注引起的，在输入上没有引入结构偏差。为了解决这个问题，我们探索将位置关系先验作为注意偏差来增强目标检测，随后使用提出的定量宏观相关(MC)度量验证其统计显著性。我们的方法，称为 Relation -DETR，引入了一个编码器来构建位置关系嵌入，以进行渐进式注意力细化，这进一步将传统的DETR流管道扩展到一个对比关系管道，以解决非重复预测和正监督之间的冲突。在通用和特定任务数据集上进行的大量实验证明了我们方法的有效性。 在相同的配置下，relationship -DETR实现了显着的改进(与DINO相比+2.0%的AP ………………………………