一种基于自监督学习的三维人脸模型重建方法及系统

    公开(公告)号:CN112950775A

    公开(公告)日:2021-06-11

    申请号:CN202110457570.3

    申请日:2021-04-27

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于自监督学习的三维人脸模型重建方法及系统。该方法包括:基于单张人脸图片,利用训练好的编码神经网络预测粗糙三维人脸模型参数;基于所述粗糙三维人脸模型参数构建粗糙三维人脸模型;将所述粗糙三维人脸模型进行UV展开并进行渲染,得到第一渲染图像;将所述单张人脸图像反投影到所述粗糙三维人脸模型后进行UV展开并进行渲染,得到第二渲染图像;基于所述第一渲染图像和所述第二渲染图像,利用训练好的置换贴图预测神经网络预测深度方向置换贴图;将所述深度方向置换贴图叠加到所述粗糙三维人脸模型上,得到重建的三维人脸模型。本发明无需大量采集真实三维人脸模型的情况下,仅使用单张图片即可得到精细的三维人脸模型。

Patent Agency Ranking