专栏名称: PaperWeekly
PaperWeekly是一个推荐、解读、讨论和报道人工智能前沿论文成果的学术平台,致力于让国内外优秀科研工作得到更为广泛的传播和认可。社区:http://paperweek.ly | 微博:@PaperWeekly
今天看啥  ›  专栏  ›  PaperWeekly

仅8B,全面超越GPT-4V!单图、多图、视频理解端侧三冠王!史上最强端侧多模态诞生

PaperWeekly  · 公众号  · 科研  · 2024-08-08 12:46
    

文章预览

再次刷新端侧多模态天花板, 面壁「小钢炮」MiniCPM-V 2.6 模型重磅上新!  仅 8B 参数, 单图、多图、视频理解全面超越 GPT-4V!  更有 多项功能首次上「端」 :小钢炮一口气将 实时视频理解、多图联合理解、多图 ICL 等能力首次搬上端侧多模态模型 ,更接近充斥着复杂、模糊、连续实时视觉信息的多模态真实世界,更能充分发挥端侧 AI 传感器富集、贴近用户的优势。 ➤ MiniCPM-V 2.6 开源地址: https://github.com/OpenBMB/MiniCPM-V  https://huggingface.co/openbmb/MiniCPM-V-2_6 ➤ llama.cpp、ollama、vllm 部署教程地址: https://modelbest.feishu.cn/docx/Duptdntfro2Clfx2DzuczHxAnhc ➤ MiniCPM 系列开源地址: https://github.com/OpenBMB/MiniCPM 亮点众多,延续了「小钢炮」系列一贯的以小博大与高效低成本,划重点如下:  「三合一」最强端侧多模态: 首次在端侧实现 单图、多图、视频理解 等多 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览