ECCV 2024 | Arc2Face：身份条件化的人脸生成基础模型，高一致性高质量的AI人脸艺术风格照生成

文章预览

前言   本文 将人脸特征映射到SD的CLIP的编码空间，通过微调SD实现文本编码器转换为专门为将ArcFace嵌入投影到CLIP潜在空间而定制的人脸编码器。 Pytorch训练营，花两个星期彻底掌握代码实现 CV各大方向专栏与各个部署框架最全教程整理 CV全栈指导班、基础入门班、论文指导班 全面上线!! 文章地址：https://arxiv.org/abs/2403.11641 项目地址：https://github.com/foivospar/Arc2Face | 01 导言 今天分享一个人脸合成基础模型，主要是考虑到未来可能需要合成人脸数据或者基于此做高质量一致性的人脸生成，先Mark。 Arc2Face是一种身份条件化人脸基础模型，给定一个人的 ArcFace 嵌入，该模型可以生成多样化的照片般逼真的图像，其人脸相似度远超现有模型（比如FaceSwap、InstantID等）。 Arc2Face 以预训练的稳定扩散模型为基础， 仅以 ID 向量为条件， 使其适应 ID 到人脸生成的 ………………………………