215-A2｜Meta媒体基础模型，运动控制视频定制，从平移视频生成全景视频，动作条件视频世界模型；视频到音乐；语音驱动手势生成

文章预览

AIGC   Research 主编｜ 庄才林（Cailin Zhuang） 技术支持｜胡耀淇（Yaoqi Hu） Topic: Video Generation｜ 1. Media Foundation Models 2. Customization &  Motion Control 3. Panoramic Videos 4. World Models Movie Gen: A Cast of Media Foundation Models 2024-10-17｜Meta ｜⭐️⭐️ http://arxiv.org/abs/2410.13720v1 https://go.fb.me/MovieGenResearchVideos 概述 Movie Gen 是一组基础模型， 旨在生成高质量的1080p高清晰度视频，同时具备同步音频的能 力 。该模型不仅可以进行文本到视频的合成， 还能实现视频个性化、视频编辑以及音频生成等多种功能 。Movie Gen 的核心模型是一个30B参数的变换器，能够处理高达73K的视频标记，并生成时长最长为16秒的视频。通过在大规模互联网数据上进行预训练，Movie Gen 在多项媒体生成任务中设立了新的性能标准，包括文本到视频合成、视频个性化、视频编辑以及音频生成。该项目的目标 ………………………………