ECCV 2024 | SAM4MLLM：多模态大语言模型和SAM结合！性能涨点！

文章预览

点击下方 卡片 ，关注“ CVer ”公众号 AI/CV重磅干货，第一时间送达 点击进入—> 【Mamba/多模态/扩散】交流群 添加微信号：CVer2233，小助手会拉你进群！ 扫描下方二维码，加入CVer学术星球 ！ 可以获得最新顶会/顶刊上的论文idea 和 CV从入门到精通资料，及最前沿应用 ！发论文/搞科研/涨薪，强烈推荐！ 转载自：晓飞的算法工程笔记 论文: SAM4MLLM: Enhance Multi-Modal Large Language Model for Referring Expression Segmentation 论文地址：https://arxiv.org/abs/2409.10542 论文代码：https://github.com/AI-Application-and-Integration-Lab/SAM4MLLM 创新点 提出了一种允许 MLLM 理解像素级细节的方法 SAM4MLLM ，无需改变 MLLM 模型架构、引入新标记或使用额外损失，该方法简单但对引用表达分割（ RES ）非常有效。 为了连接 MLLM 和 SAM ，引入了一种新颖的方法，通过主动询问语言系统来获取提示点线索 ………………………………