专栏名称: AI小岛
AI小岛,高效不烦恼!这里是AI的宝藏岛,通过AI魔法让学习和工作事半功倍,开启新生活的无限可能。
今天看啥  ›  专栏  ›  AI小岛

不只是大,是巨大!3140亿参数的震撼:Elon Musk开源Grok-1!

AI小岛  · 公众号  ·  · 2024-03-18 10:20
在AI界,刚刚发生一件激动人心的消息:Elon Musk 联合 xAI 团队,大手笔地开源他们的超级大模型——Grok-1(详情点击文末的“阅读原文”查看)!想象一下,一个文件大小高达296.38 GB,拥有3140亿参数的庞然大物,如今正站在世界舞台的中心,向全球宣告其威力。“不只是大,是巨大!”这句话完美地描述Grok-1的特点。比起GPT-3.5的1750亿参数,Grok-1的规模是其两倍之大,成为迄今为止参数量最大的开源大语言模型。Elon Musk 此举不仅展示他对开放和透明的AI发展的承诺,更是将竞争推向一个全新的高度。Grok-1的开源不仅意味着技术的共享,它象征着未来AI时代的广阔天地和无限潜能。这个模型采用混合专家(MoE)系统,其中只有约25%的参数在处理特定数据时会被激活。这种设计使得Grok-1在处理信息时更为高效和精准。模型的构建是由xAI团队负责,他们利 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照