Mamba原论文收录新会议！新架构在多项任务超越Transformer！

文章预览

点击下方 卡片 ，关注“ CVer ”公众号 AI/CV重磅干货，第一时间送达 点击进入—> 【Mamba/多模态/扩散】交流群 添加微信号：CVer111，小助手会拉你进群！ 扫描下方二维码，加入CVer学术星球 ！ 可以获得最新顶会/顶刊上的论文idea 和 CV从入门到精通资料，及最前沿应用 ！发论文/搞科研/涨薪，强烈推荐！ 西风 发自 凹非寺 转载自：量子位（QbitAI） “欧洲OpenAI”和“Transformer挑战者”强强联合了！ Mistral AI刚刚推出了其第一个基于 Mamba2 架构的开源模型—— Codestral Mamba （7B），专搞代码生成。 与Transformer架构不同，Mamba架构可进行“线性时间推理”，理论上能够支持无限长度输入。 Mistral AI：这也就是为啥我们用Mamba架构推出的代码推理模型抗打。 Mistral AI表示已经在最多 256k token上下文 中测试了Codestral Mamba。 基准测试中，Codestral Mamba总体性能超越CodeGem ………………………………