骇人听闻 | “开源Llama3”竟然可以媲美“闭源GPT4-Turbo”，NVIDIA全面{披露幕后细节}！

文章预览

打造一个有温度、有趣味、专业的全栈式AI 交流社区， 用心写好每一篇文章！ “  近期，开源LLM社区在提升开放获取大型语言模型（LLM）的能力方面取得了重大进展。然而，它们与前沿闭源LLM模型（如GPT-4-Turbo（OpenAI，2023））相比，许多领域仍存在较大的性能差距。所有领先的闭源LLM都支持非常大的上下文窗口，允许它们在一个提示中容纳数百页文本。LLM的长上下文能力有时被认为是一种与检索增强生成（RAG）相互竞争的技术。然而，从实用的角度来看，这些技术是相辅相成的。  本文介绍了ChatQA 2，这是一种基于Llama3的模型，旨在弥合开源LLM和闭源LLM（如GPT-4Turbo）在长上下文理解和检索增强生成（RAG）能力方面的巨大差距。这两种能力对于LLM处理无法放入单个提示中的大量信息至关重要，并且根据下游任务和计算预算，它们是相辅相成的。 ” ………………………………