揭示了长上下文LLM在RAG系统中增加检索段落数量后性能下降的反-20241013053811

文章预览

2024-10-13 05:38 本条微博链接 揭示了长上下文LLM在RAG系统中增加检索段落数量后性能下降的反直觉现象，并通过提出检索重排序、隐式和显式微调等方法，有效地缓解了“难负样本”的负面影响，从而显著提升了RAG系统的性能和鲁棒性。 [CL]《Long-Context LLMs Meet RAG: Overcoming Challenges for Long Inputs in RAG》B Jin, J Yoon, J ………………………………