专栏名称: 机器之心SOTA模型
追踪 AI 开源进展,探索先进开发实践。
今天看啥  ›  专栏  ›  机器之心SOTA模型

今日开源(2024-09-19):阿里云发布Qwen2.5:全面升级的大型语言模型系列,支持多语言与长文本生成

机器之心SOTA模型  · 公众号  ·  · 2024-09-19 18:00

文章预览

🏆 基座模型 ①项目:阿里云Qwen2.5 ★Qwen2.5是由阿里云Qwen团队开发的大型语言模型系列。训练数据从Qwen2的7T tokens 扩展到了Qwen2.5的18T tokens ; 该系列模型包括多种尺寸,从0.5B到72B不等,支持29种语言;上下文最大长度128K,其中超过32K的部分利用YARN来进行外推处理,并且最大生成长度8K。 Qwen2.5在指令跟随、生成结构化输出和多语言支持方面有显著改进,适用于各种自然语言处理任务。同时还开源了Qwen2.5-Coder模型和Qwen2.5-Math模型。 ☆一键收藏: https://sota.jiqizhixin.com/project/qwen2-5 ②项目:Moshi ★ Moshi是一个语音文本基础模型和全双工语音对话框架 。 它使用最先进的流式神经音频编解码器 Mimi , 能够以1.1 kbps的带宽处理24 kHz的音频,延迟仅为80ms 。Moshi通过两个音频流进行工作,一个对应于Moshi,另一个对应于用户。Moshi预测其自身语音的文本标记, ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览