ECCV 2024 | CNN涨点神器！WTConv：大感受野的小波卷积

文章预览

点击下方 卡片 ，关注“ CVer ”公众号 AI/CV重磅干货，第一时间送达 点击进入—> 【Mamba/多模态/扩散】交流群 添加微信号：CVer111，小助手会拉你进群！ 扫描下方二维码，加入CVer学术星球 ！ 可以获得最新顶会/顶刊上的论文idea 和 CV从入门到精通资料，及最前沿应用 ！发论文/搞科研/涨薪，强烈推荐！ 来源：晓飞的算法工程笔记 近年来，人们尝试增加卷积神经网络（ CNN ）的卷积核大小，以模拟视觉 Transformer （ ViTs ）自注意力模块的全局感受野。然而，这种方法很快就遇到了上限，并在实现全局感受野之前就达到了饱和。论文证明通过利用小波变换（ WT ），实际上可以获得非常大的感受野，而不会出现过参数化的情况。例如，对于一个  的感受野，所提出方法中的可训练参数数量仅以  进行对数增长。所提出的层命名为 WTConv ，可以作为现有架 ………………………………