硅谷AI保卫战打响！最强4050亿开源模型Llama 3.1上线｜钛媒体AGI

文章预览

图源： Meta AI ▎ Meta CEO扎克伯格强调，美国在AI发展方面永远领先中国数年是不现实的。但他也指出，即使是几个月的微小领先也会随着时间的推移而“积少成多”，从而使美国获得“明显优势”。 作者｜林志佳 编辑｜胡润峰 本文首发于钛媒体APP 就在今天凌晨，Meta和OpenAI打响了硅谷 AI 大模型保卫战。 钛媒体App 7月24日报道，美国科技巨头Meta今晨推出迄今为止性能最强大的开源大模型——Llama 3.1 405B（4050亿参数），同时发布了全新升级的Llama 3.1 70B和8B模型版本。 Llama 3.1 405B支持上下文长度为128K Tokens，在基于15万亿个Tokens、超1.6万个H100 GPU上进行训练，这也是Meta有史以来第一个以这种规模进行训练的Llama模型。研究人员基于超150个基准测试集的评测结果显示，Llama 3.1 405B可与GPT-4o、Claude 3.5 Sonnet和Gemini Ultra等业界头部模型相比较。 Meta创始人、首席 ………………………………