混合动作表示的高保真人脸重现方法

    公开(公告)号:CN114581612A

    公开(公告)日:2022-06-03

    申请号:CN202210459830.5

    申请日:2022-04-28

    Abstract: 本发明公开了一种混合动作表示的高保真人脸重现方法,属于深度人脸伪造领域。包括提取驱动人脸的动作单元和姿态信息以及源人脸的关键点信息;利用关键点转换模块根据驱动人脸的动作单元和姿态信息转换源人脸的关键点信息;使用预训练的分割网络将源人脸图片分离为人脸区域和背景区域;将动作单元和转换过的关键点信息,以及人脸区域输入重现网络,生成目标人脸;将目标人脸和背景区域输入到背景融合模块,生成最终结果。本发明混合多种动作表示作为人脸重现的指引信号,并利用空间自适应正则化插入动作特征,使重现过程能更好地保持语义特征;同时结合背景分离技术,进一步提高生成人脸的真实性和帧间连续性,实现高保真的人脸重现。

    混合动作表示的高保真人脸重现方法

    公开(公告)号:CN114581612B

    公开(公告)日:2022-08-02

    申请号:CN202210459830.5

    申请日:2022-04-28

    Abstract: 本发明公开了一种混合动作表示的高保真人脸重现方法,属于深度人脸伪造领域。包括提取驱动人脸的动作单元和姿态信息以及源人脸的关键点信息;利用关键点转换模块根据驱动人脸的动作单元和姿态信息转换源人脸的关键点信息;使用预训练的分割网络将源人脸图片分离为人脸区域和背景区域;将动作单元和转换过的关键点信息,以及人脸区域输入重现网络,生成目标人脸;将目标人脸和背景区域输入到背景融合模块,生成最终结果。本发明混合多种动作表示作为人脸重现的指引信号,并利用空间自适应正则化插入动作特征,使重现过程能更好地保持语义特征;同时结合背景分离技术,进一步提高生成人脸的真实性和帧间连续性,实现高保真的人脸重现。

Patent Agency Ranking