使用 RAGAS 评估您的 RAG 应用程序 |简单的 3 个步骤

文章预览

◆ RAG 评估的必要性 在 LLM 和聊天机器人的世界里，幻觉是我们正在对抗的最常见的问题。幻觉通常通过两种常用技术来处理 针对特定任务进行微调 检索增强生成 在这两个选项中，RAG 系统更受个人欢迎。然而，在构建 RAG 应用程序时有很多选项可供选择，如图 1 所示 如图所示，在构建 RAG 应用程序时，有很多选项可供选择。 但是，选择适合您最佳需求的一种更为重要。 这里有一个很棒的框架 - RAGAS： 检索增强生成的自动评估，用于评估基于 RAG 的应用程序。 这侧重于指标驱动开发 (MDD)，以提高 RAG 应用程序的性能。 ◆ 执行 1. 安装和导入软件包 （注意：我们将使用 Open AI 的 GPT-4 来评估准备好的数据，确保您已准备好 Open AI Api 密钥） 使用您喜欢的包管理器安装包。在这里，我使用 PIP 来安装和管理依赖项。 pip install -U -q ragas tqdm datasets 导入已 ………………………………