CVPR'24 Highlight！北大朱毅鑫团队人-场景交互建模新突破：创新自回归扩散方法实现动作生成

文章预览

‍ 点击下方 卡片 ，关注“ AI生成未来 ” 智猩猩论文探析 Cyn摘编 ‍ 人类与环境之间的复杂互动是人-场景交互（HSI）任务的焦点，涵盖了从对象级别的交互到场景级别的规划与交互等多个方面。 尽管目前研究人员在该领域取得了一定成果，但其发展明显受到高质量数据集稀缺的阻碍。且随着虚拟现实（VR）、增强现实（AR）以及动画和游戏产业的快速发展，人们对高级运动合成的需求日益增加。例如： （1）基于MoCap的数据集优先使用精密设备（如VICON）进行高质量的人体运动捕捉，但往往缺乏捕捉多样和沉浸式HSI的能力。 （2）通过可扩展的RGBD视频记录的数据集提供了更广泛的实用性，但受到人体姿势和对象跟踪质量较低的限制。 （3）合成数据集的出现提供了成本效益和适应性，但未能完全包含真实的HSI，特别是在捕获动态3D接触和对象跟踪方 ………………………………