多模态推荐在网易云音乐社区的创新实践

文章预览

导读   本文将介绍云音乐社区推荐系统中多模态内容理解的应用实践，将详细阐述多模态内容理解在音频和图文内容上的应用，包括使用 Music Clip 和 Audio MAE 进行音频表征学习，以及通过 Flava 架构进行图文内容特征融合。文章强调了多模态内容理解在新内容和新用户优化上的重要性。 主要内容包括以下几大部分： 1.  云音乐社区业务简介 2.  多模态内容理解 3.   冷启动应用实践 4.  展望 5.  问答环节 分享嘉宾｜ 罗如意 网易云音乐 资深算法工程师 编辑整理｜ 王红雨 内容校对｜李瑶 出品社区｜ DataFun 01 云音乐社区业务简介 音乐社区的核心目标就是做“更音乐”的社区，整个主题都是在围绕音乐做社区。 云音乐社区业务主要包括四种类型 ： “评论”，即单曲下面的歌曲评论的推荐，是纯文本形式。 “瞬间”，和评论类似，唯一的区别是它 ………………………………