专栏名称: DataLearner
关注数据科学 关注科技行业 关注人工智能 关注一切促进人类生活美好的新技术
今天看啥  ›  专栏  ›  DataLearner

重磅!Meta开源4050亿参数的大模型Llama3.1-405B!多项评测结果超GPT-4o和Claude3.5 Sonnet

DataLearner  · 公众号  ·  · 2024-07-24 00:14
    

文章预览

本文原文来自DataLearnerAI官方网站: https://www.datalearner.com/blog/1051721749761059 Llama系列大语言模型是由MetaAI开源的一系列大语言模型。作为最早开源的大语言模型,Llama系列对大模型开源社区的推动有目共睹。而现在MetaAI开源Llama3.1系列模型,其中包括迄今为止最大规模的开源大语言模型Llama3.1-405B,参数规模达到了4050亿!其多项评测结果超过GPT-4、GPT-4o模型,与Claude3.5-Sonnet几乎有来有回! Llama3.1系列模型简介 Llama3.1系列模型评测结果 Llama3.1系列模型的训练成本 Llama3.1系列模型的开源地址 Llama3.1系列模型简介 Llama3.1系列模型是Llama3系列模型继续训练的结果,包含3个不同参数规模的版本,分别是80亿参数规模的Llama3.1-8B、700亿参数规模的Llama3.1-70B和4050亿参数规模的Llama3.1-405B。这三个不同规模的模型训练数据量都达到了15万亿tokens。上下文长度均为128K。 这 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览