基于三维的人脸合成与替换系统实现

摘要

在保持人物身份的前提下对人脸合成,也称为人脸替换,目的将源图像中的人脸无缝且逼真地融合到目标图像。本文提出了一种自动化的人脸合成与替换系统,利用带有标签的图像合成用户感兴趣的全新形象,实现如虚拟试发、虚拟试衣的应用。系统的输入为单张人脸图像和查询文本,其中查询文本用于搜索相关图像,构建待替换的目标图像集合。为提高人脸合成效果,本文首先通过人脸图像重建三维人脸模型,在三维空间完成了人脸的姿态与表情迁移,然后通过人脸图像分解估计环境光照,实现了人脸图像的重光照,最后通过图像融合技术实现人脸的图像融合。实验证明我们的方法可以合成较为真实的人脸图像。