Modelscope-Agent 增强RAG能力：（一）多策略召回、多模态召回

文章预览

01 背景 Modelscope-Agent（https://github.com/modelscope/modelscope-agent） 是魔搭GPTs 开源的实现方案的底层框架，基于chatbot允许用户通过聊天、直接配置的方式进行agent的定制生成，可以允许用户使用自定义知识库以及接入多工具的能力。于此同时，Modelscope-Agent当前支持的知识库功能存在：可读文件类型有限、效果不稳定、召回策略固定、对大文件和多文件的支持较弱等问题。 为增强Modelscope-Agent的知识库能力，我们兼容适配了常用的RAG开源方案来增强这方面能力，目前主要功能以llama-index为主。llama-index 是一个简单、灵活的RAG数据框架，用于将自定义数据源连接到大型语言模型 (LLM)。同时llama-index提供 插件市场 ，支持社区开发者贡献不同类型文件reader、不同召回策略、chunk方法等。结合社区能力，可很好地对modelscope_agent的知识库能力做补充。 02 简介 本系列 ………………………………