174-A2｜Agent调度多感官电影生成，多场景长视频生成Agent，掩膜与轨迹控制视频生成，文本驱动视频编辑质量评估｜Thu

文章预览

AIGC   Research 主编｜ 庄才林（Cailin Zhuang） 技术支持｜胡耀淇（Yaoqi Hu） Topic: Video & Audio Generation｜Multi-sensory Composition, Multi-Scene Long Video AutoDirector: Online Auto-scheduling Agents for Multi-sensory Composition 2024-08-21｜MSRA, Microsoft Azure AI, Microsoft Search & Distribution, HIT｜⭐️⭐️ http://arxiv.org/abs/2408.11564v1 概述 在本文中，我们提出了一种创新的 多感官电影生成 框架——AutoDirector。 传统的电影制作流程是线性的且效率低下，难以满足用户多变的需求 。AutoDirector通过 自动调度和实时交互 ，优化了包含 剧本创作、场景生成、音乐配乐、配音和特效制作等 多个环节的多感官合成过程。在这一框架中， 我们不仅提高了多感官电影制作的效率，还使得AI在协助人类导演方面展现出更大的潜力 。我们解决了在多感官合成过程中任务间依赖关系的复杂性，以高效的方式创造 ………………………………