TELA: 最先进文本描述生成3D穿衣人体方案！支持虚拟试衣，上海AI Lab&网易等联合发布

文章预览

论文链接：https://arxiv.org/pdf/2404.16748 今天和大家分享的这个工作，核心是解决了从文本描述生成3D穿着衣物的人体的任务。先前的工作通常将人体和衣物编码为一个整体模型，并在单阶段优化中生成整个模型，这使得它们在进行服装编辑时困难重重，同时失去了对整个生成过程的细粒度控制。为了解决这个问题， 本文提出了一种分层式的穿着人体表示方法，结合渐进优化策略，可以生成解耦的3D人体模型，同时提供对生成过程的控制能力 。基本思想是逐步生成一个穿着最少的人体和分层的衣物。在衣物生成过程中，提出了一种新的分层组合渲染方法来融合多层次的人体模型，并利用新的损失函数帮助将衣物模型与人体解耦。所提出的方法实现了高质量的解耦，从而为3D服装生成提供了一种有效的方式。大量实验表明，本文的方法在实现最先进的3D穿 ………………………………