公开(公告)号：CN113012712A

公开(公告)日：2021-06-22

申请号：CN202110236535.9

申请日：2021-03-03

Applicant: 华北理工大学

Inventor： 刘亚志 ,  田裕 ,  李伟 ,  杨志刚 ,  黄永生

IPC: G10L21/06 ,  G10L21/10 ,  G06K9/00 ,  G06N3/04 ,  G06N3/08 ,  G06T3/40 ,  G06T5/50

Abstract: 本申请实施例属于图像处理技术领域，涉及一种基于生成对抗网络的人脸视频合成方法及装置。此外，本申请还涉及区块链技术，用户的当前音频数据以及目标人脸视频可存储于区块链中。本申请通过在人脸图像的生成质量上进行对抗训练，以“f‑散度评估”生成数据分布与真实数据分布之间的差异，在增加模型损失收敛速度的同时提高了网络模型对人脸图像视频帧的生成效果。此外本公开为了验证视频帧序列与音频的对齐问题，使用条件对抗网络把音频序列作为条件，输入到视频帧序列判别网络中以提高序列同步的准确性。