ECCV 2024 | Arc2Face：身份条件化的人脸生成基础模型，高一致性高质量的AI人脸艺术风格照生成

文章预览

文章地址：https://arxiv.org/abs/2403.11641 项目地址：https://github.com/foivospar/Arc2Face 来源 | AICV与前沿，作者 | 雨沐林风 | 01 导言 今天分享一个人脸合成基础模型，主要是考虑到未来可能需要合成人脸数据或者基于此做高质量一致性的人脸生成，先Mark。 Arc2Face是一种身份条件化人脸基础模型，给定一个人的 ArcFace 嵌入，该模型可以生成多样化的照片般逼真的图像，其人脸相似度远超现有模型（比如FaceSwap、InstantID等）。 Arc2Face 以预训练的稳定扩散模型为基础， 仅以 ID 向量为条件， 使其适应 ID 到人脸生成的任务。训练数据上 精心上采样了 WebFace42M （ 最大的人脸识别 (FR) 公共数据集 ）数据库的很大一部分，该数据集具有一致的身份和源自WebFace42M的类内变异性，然后基于此微调SD，并使用了FFHQ和CelebA-HQ微调以提高质量。 相比于最近将 ID 与文本嵌入相结合 ………………………………