基于多域特征融合的换脸视频篡改检测方法及系统

    公开(公告)号:CN112734696B

    公开(公告)日:2023-01-13

    申请号:CN202011544772.3

    申请日:2020-12-24

    Abstract: 本发明公开了一种基于多域特征融合的换脸视频篡改检测方法及系统,该方法包括下述步骤:数据集划分;视频分帧并选择待测帧序列,提取各帧图像待检测区域;计算检测区域的RGB特征、DFT特征和光流特征图像;构建多路卷积神经网络的卷积特征提取模块;各支路卷积特征输入注意力模块,生成注意力引导特征图;多路注意力引导特征级联融合,输入用于特征分类的全连接层;将特征图像输入多路卷积神经网络进行训练,保存网络模型和最佳权重;利用训练完成后的模型进行预测分类,输出换脸视频篡改检测结果。本发明能够较好地结合视频在空间域、频域以及时域的篡改信息,提高了模型的泛化能力,利用通道注意力机制优化模型对多个领域分类特征的学习。

    基于多域特征融合的换脸视频篡改检测方法及系统

    公开(公告)号:CN112734696A

    公开(公告)日:2021-04-30

    申请号:CN202011544772.3

    申请日:2020-12-24

    Abstract: 本发明公开了一种基于多域特征融合的换脸视频篡改检测方法及系统,该方法包括下述步骤:数据集划分;视频分帧并选择待测帧序列,提取各帧图像待检测区域;计算检测区域的RGB特征、DFT特征和光流特征图像;构建多路卷积神经网络的卷积特征提取模块;各支路卷积特征输入注意力模块,生成注意力引导特征图;多路注意力引导特征级联融合,输入用于特征分类的全连接层;将特征图像输入多路卷积神经网络进行训练,保存网络模型和最佳权重;利用训练完成后的模型进行预测分类,输出换脸视频篡改检测结果。本发明能够较好地结合视频在空间域、频域以及时域的篡改信息,提高了模型的泛化能力,利用通道注意力机制优化模型对多个领域分类特征的学习。

    基于光照方向一致性的换脸视频篡改检测方法及系统

    公开(公告)号:CN110807396B

    公开(公告)日:2022-04-22

    申请号:CN201911029276.1

    申请日:2019-10-28

    Abstract: 本发明公开了一种基于光照方向一致性的换脸视频篡改检测方法及系统,该方法包括下述步骤:进行视频分帧并选择检测区域;计算各帧图像检测区域对应的特征图像;将检测区域和特征图像进行分块,逐帧计算每个子区域图像的平均像素值和边缘信息百分比;选择各帧图像的目标区域;计算目标区域的二维光照方向;将目标区域图像对应的边缘信息百分比作为权重,对目标区域的二维光照方向进行加权计算得到各帧图像的二维光照方向;计算各帧图像二维光照方向的角度并构建光照角度集合;根据光照角度集合的标准差与设定判别门限的差值判断待测视频是否为换脸篡改视频。本发明基于视频光照特征进行快速准确的换脸视频篡改检测,具有良好的通用性和实时性。

    基于光照方向一致性的换脸视频篡改检测方法及系统

    公开(公告)号:CN110807396A

    公开(公告)日:2020-02-18

    申请号:CN201911029276.1

    申请日:2019-10-28

    Abstract: 本发明公开了一种基于光照方向一致性的换脸视频篡改检测方法及系统,该方法包括下述步骤:进行视频分帧并选择检测区域;计算各帧图像检测区域对应的特征图像;将检测区域和特征图像进行分块,逐帧计算每个子区域图像的平均像素值和边缘信息百分比;选择各帧图像的目标区域;计算目标区域的二维光照方向;将目标区域图像对应的边缘信息百分比作为权重,对目标区域的二维光照方向进行加权计算得到各帧图像的二维光照方向;计算各帧图像二维光照方向的角度并构建光照角度集合;根据光照角度集合的标准差与设定判别门限的差值判断待测视频是否为换脸篡改视频。本发明基于视频光照特征进行快速准确的换脸视频篡改检测,具有良好的通用性和实时性。

Patent Agency Ranking