公开(公告)号：CN115937429A

公开(公告)日：2023-04-07

申请号：CN202211641983.8

申请日：2022-12-20

Applicant: 上海大学

Inventor： 黄东晋 ,  石永生 ,  刘金华 ,  俞乐洋 ,  李一麟 ,  于冰

IPC: G06T17/00 ,  G06T7/11 ,  G06T15/20 ,  G06V40/16 ,  G06V10/766 ,  G06V10/774 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/084

Abstract: 本发明涉及一种基于单张图像的细粒度3D人脸重建方法，对原始的人脸图像数据集进行预处理，裁剪人脸部分区域，提取人脸的mask图并标记landmarks；然后在粗糙的3D人脸重建阶段，将预处理后的人脸图像输入到人脸回归模型中，进行网络模型训练；然后根据训练后的人脸回归模型参数，输出人脸系数向量，通过渲染生成平滑二维人脸图像；再在细粒度的3D人脸重建阶段，将反照率图输入到反照率模型中，进行反照率网络模型训练。根据训练后得到的反照率模型参数输出反照率图，根据训练后得到的深度移位模型参数，输出深度移位图。本发明方法能从单张图像中重建出细粒度的3D人脸几何和纹理信息，还对自然界中不同条件下人脸图像具有鲁棒性，应用于虚拟现实和娱乐影视。