【综述专栏】中科院自动化研究所-模式识别实验室NLPR——基于神经辐射场的人脸编辑

文章预览

1 引言 生成式人工智能理论的突破，极大地促进了数字内容创作的繁荣发展，为计算机视觉研究带来了全新的范式变革，进而推动了人脸合成与编辑技术的重大进步和广泛应用。人脸编辑可分为人脸属性编辑、人脸运动编辑两个内容。人脸属性编辑针对特定语义进行人脸再生成，这些语义涉及年龄、性别、配饰、妆容等图像内容，广义人脸属性编辑也可包含对身份信息的编辑。人脸运动编辑重点对人脸运动信息进行建模，并根据驱动信号实现面部特征的变化，比如基于语音驱动的说话人脸视频生成。 人脸编辑技术近年来取得令人瞩目的效果，但基于二维图像表征的生成模型仍受限于对人脸三维结构的感知不足。从而导致在动态人脸编辑任务，如视角变换或序列化视频生成中，难以维持人脸几何及纹理的一致性。为此，学者们尝试通过引入人脸神经 ………………………………