专栏名称: AI算法与图像处理
考研逆袭985,非科班跨行AI,目前从事计算机视觉的工业和商业相关应用的工作。分享最新最前沿的科技,共同分享宝贵的资源资料,这里有机器学习,计算机视觉,Python等技术实战分享,也有考研,转行IT经验交流心得
今天看啥  ›  专栏  ›  AI算法与图像处理

效果逼真!视频编辑新玩法!角色、动作、背景都能控制!

AI算法与图像处理  · 公众号  ·  · 2024-10-13 20:10

文章预览

大家好,今天和大家分享一篇最新的工作 1、 MIMO MIMO 可控视频合成 的通用模型,可以调整视频的主角,合成动作以及场景来控制合成的视频。 MIMO ,不仅可以合成具有由 用户输入 提供的 可控属性 (即角色、运动和场景)的角色视频,而且还可以同时实现对任意角色的 高级可扩展性、通用性到新颖性3D 动作以及统一框架中交互式现实世界场景的适用性 。 核心思想: 1)允许用户提供多个输入(例如,角色的单个图像、运动的姿势序列以及场景的单个视频/图像-Target Attributes)以分别提供期望的属性或驱动视频(driving video)作为输入。 2)该模型可以将目标属性嵌入到潜在空间中以构造目标代码,并将具有空间感知分解的驱动视频(driving video)编码为空间代码,从而通过以特定顺序自由集成潜在代码来实现对合成的直观属性控制。 更通俗的理 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览