RAG 与长上下文 LLM我还没有看到令人信服的论文或技术博客表-20240906134543

文章预览

2024-09-06 13:45 本条微博链接 RAG 与长上下文 LLM 我还没有看到令人信服的论文或技术博客表明长上下文 LLM 可以或将会取代 RAG。 到目前为止，我已经看到了特定的长上下文应用，其中长上下文 LLM 蓬勃发展，而当前的检索基准并不令人信服。 这篇新论文报告称，较长上下文的 LLM 对相关信息的关注度降低，这是 RAG 系统解决的主要问题之一（即使用更多相关信息）。 他们提出了一种保序 RAG 机制，可以提高长上下文问答的性 ………………………………