公开(公告)号：CN115861525A

公开(公告)日：2023-03-28

申请号：CN202210607306.8

申请日：2022-05-31

Applicant: 福州大学

Inventor： 陈俊 ,  林丽皇

IPC: G06T17/00 ,  G06V40/16 ,  G06T19/00 ,  G06T15/20 ,  G06T7/73 ,  G06T7/40 ,  G06T7/20 ,  G06T5/50 ,  G06T3/40 ,  G06N3/084 ,  G06N3/0464 ,  G06V10/74 ,  G06V10/774 ,  G06V10/82

Abstract: 本发明涉及一种基于参数化模型的多视图人脸重建方法,包括：步骤S1：获取若干张不同视角二维人脸图像并处理，然后采用人脸关键点检测器Dlib算法进行面部特征点检测和跟踪；步骤S2：根据不同视角二维人脸图像中特征点位置对分别对正脸、左侧脸、右侧脸的无遮挡区域进行mask裁图；步骤S3：将mask裁图输入到Resnet网络中，回归出不同视角的人脸形状、表情、姿态、光照及相机参数；步骤S4：将参数拟合到参数化人脸模型，生成对应的三维人脸模型；步骤S5：进行纹理采样，再使用可微分渲染器生成渲染后的图片；步骤S6：将渲染图片与原图进行损失计算，反向传播参数，优化三维人脸模型。本发明能够恢复出更加逼真的人脸模型，有效提高了复杂场景下的人脸质量。