183-A2｜高分辨视频外绘，3D可控文生视频（LLM+3D角色，多人物动作）；视频深度估计；视频压缩VAE；音频驱动人类动画化

文章预览

AIGC   Research 主编｜ 庄才林（Cailin Zhuang） 技术支持｜胡耀淇（Yaoqi Hu） Topic: Video Generation｜Outpainting Follow-Your-Canvas: Higher-Resolution Video Outpainting with Extensive Content Generation Follow-Your-Canvas 2024-09-02｜Tencent Hunyuan, HKUST, USTC, THU｜⭐️⭐️ http://arxiv.org/abs/2409.01055v1 https://follow-your-canvas.github.io/ 概述 在视频生成领域，出画/外绘（Outpainting）技术旨在扩展视频的空间内容，并填充指定画布区域。 现有方法常常受限于某些约束，例如生成内容质量低和GPU内存限制 。本研究提出了一种新型方法“Follow-Your-Canvas”，旨在克服这些挑战，实现高分辨率视频的出画和丰富内容生成。该方法以扩散为基础， 结合了空间窗口策略和布局对齐设计 ，从而在保留空间和时间一致性的同时，实现了更大的内容扩展比例和高质量的视觉效果。最终， Follow-Your-Canvas能够将视频从512×5 ………………………………