209-A3.1｜高斯-网格混合表示的视频到4D，组合式文生4D交互，人-物交互生成；PBR纹理生成，文本驱动实时视频到卡通头像

文章预览

AIGC   Research 主编｜ 庄才林（Cailin Zhuang） 技术支持｜胡耀淇（Yaoqi Hu） Topic: 4D Generation｜ 1. Video-to-4D & Gaussian-Mesh 2. Compositional Text-to-4D 3. Human-Object Interaction ‍ ‍ ‍ ‍ DreamMesh4D: Video-to-4D Generation with Sparse-Controlled Gaussian-Mesh Hybrid Representation DreamMesh4D 2024-10-09｜ZJU, Westlake U｜NeurIPS 2024 ｜⭐️ ⭐️ http://arxiv.org/abs/2410.06756v1 https://lizhiqi49.github.io/DreamMesh4D 概述 DreamMesh4D是一种新颖的框架， 旨在从单目视频生成动态的4D物体 。该方法结合了几何皮肤技术和网格表示，克服了以往基于隐式神经辐射场（NeRF）和显式高斯点云的技术在空间时间一致性和表面外观方面的不足。DreamMesh4D 首先通过图像到3D生成程序获得粗略网格，然后在网格表面均匀采样稀疏点，以构建变形图，驱动3D物体的运动 。通过一个新颖的 几何皮肤算法，结合线性混合皮肤（LBS）和双四 ………………………………