Meta 重磅推出 Llama 3.1

文章预览

2024 年 7 月 23 日，Meta 带来了令人瞩目的 Llama 3.1！ Llama 3.1 405B 堪称开创性的存在，它是全球最大且最强大的公开可用基础模型 能力和性能方面，Llama 3.1 4 05B 丝毫不逊色于顶级 AI 模型！ 此次发布不仅有强大的 405B 模型，还包括 8B 和 70B 模型的升级版。 它们具备多语言支持、长达 128K 的显著更长上下文长度、能够让长文本处理成为可能！你可以试着把一本小说放进去让其理解。 在模型架构上，训练 Llama 3.1 405B 是一项巨大挑战，Meta 通过优化训练堆栈和利用 1 6000 个 H100 GPU 成功攻克！ 在模型评估方面，Llama 3.1 在超过 150 个基准数据集上进行了性能评估，并与包括 GPT-4、GPT-4o 和 Claude 3.5 Sonnet 在内的竞争模型在现实场景中进行了比较，总体表现出色！ 与封闭模型不同，Llama 模型权重可供下载，开发者能够根据需求进行全面定制，成本也极具优势，为 ………………………………