【深度学习】xLSTM成功杀入医学图像分割领域，取代Mamba成为新SOTA！

主要观点总结

文章介绍了xLSTM-UNet模型在医学图像分割领域的突出表现。该模型结合了扩展长短期记忆网络（xLSTM）和UNet架构，有效处理长距离依赖关系，并在多个医学图像分割任务中表现出卓越性能。文章还提供了xLSTM-UNet的相关链接和开源代码。

关键观点总结

关键观点1: xLSTM-UNet模型的引入

文章首先介绍了xLSTM-UNet模型的背景，它是一种结合了xLSTM和UNet架构的深度学习模型，旨在克服传统卷积神经网络在处理长距离依赖关系时的局限，以及视觉Transformer在处理高分辨率图像时的高计算开销问题。

关键观点2: xLSTM-UNet模型的特点和优势

xLSTM-UNet模型具有长距离依赖捕捉能力，通过引入xLSTM，有效处理长距离依赖关系，并在计算和内存复杂度方面表现出线性增长。模型结合了UNet架构，采用了经典的UNet架构并结合了卷积层和xLSTM的优势。此外，xLSTM-UNet还在多个层次上进行特征提取，包括局部特征和全局特征。

关键观点3: xLSTM-UNet模型在医学图像分割中的表现

文章详细描述了xLSTM-UNet在多个医学图像分割数据集上的卓越表现，包括腹部MRI、内窥镜图像和显微镜图像等数据集。此外，还在BraTS2023数据集上进行了3D医学分割任务，显示了其在精确分割脑肿瘤区域方面的有效性。

关键观点4: xLSTM-UNet的成功为医学图像分割领域带来的新方向

文章最后探讨了xLSTM-UNet的成功为医学图像分割领域带来的新方向，包括解决医学图像分割中的挑战，提升模型的全局特征捕捉能力和计算效率等。

文章预览

转自：我爱计算机视觉 今年以来，Mamba作为一种处理长距离依赖关系的计算模块，在医学图像分割领域取得了显著进展。而近期，来自浙江大学，魔芯科技，中科大等单位的研究人员将Mamba替换为xLSTM，提出 xLSTM-UNet (xLSTM-UNet can be an Effective 2D \ & 3D Medical Image Segmentation Backbone with Vision-LSTM (ViL) better than its Mamba Counterpart) ，通过引入扩展长短期记忆网络（xLSTM），在多个医学图像分割任务中表现出色，超越了基于Mamba的模型！ 论文链接：https://arxiv.org/abs/2407.01530 开源代码：https://github.com/tianrun-chen/xLSTM-UNet-PyTorch 什么是xLSTM-UNet？ xLSTM-UNet是一种结合了扩展长短期记忆网络（xLSTM）和经典UNet架构的深度学习模型。传统的卷积神经网络（CNNs）在处理长距离依赖关系时存在局限，而视觉Transformer（ViTs）在处理高分辨率图像时计算开销巨大。xLSTM-UNet通过将xLSTM引 ………………………………