公开(公告)号：CN117635841A

公开(公告)日：2024-03-01

申请号：CN202311659303.X

申请日：2023-12-06

Applicant: 上海交通大学

Inventor： 俞嘉地 ,  谢佳宏 ,  朱燕民 ,  唐飞龙

IPC: G06T17/00 ,  G06T19/20 ,  G06T3/02 ,  G06V40/16 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/08 ,  G06F21/62

Abstract: 一种基于毫米波的非侵入式3D面部重构方法，通过在离线阶段构建并训练基于嵌入三重损失和改进ConvNeXt的卷积网络模型，在在线阶段通过采集人脸反射的毫米波信号并预处理后输入训练后的卷积网络模型，基于提取到的由脸部关键点构成的脸部形状后，经仿射变换和区域放大后重构得到面部表情，最后通过FLAME模型实现三维面部重构。本发明结合毫米波数据特性设计特定算法感知人脸细粒度的3D特征，实现准确的3D面部重构，能够在不需要任何光照、不侵犯个人隐私的情况下实现非侵入式3D面部重建。