公开(公告)号：CN115358290A

公开(公告)日：2022-11-18

申请号：CN202210857329.4

申请日：2022-07-20

Applicant: 国家计算机网络与信息安全管理中心青海分中心 ,  长安通信科技有限责任公司

Inventor： 李怡辰 ,  王克斌 ,  吴登伟 ,  郑丽 ,  裴宜春 ,  赵晋宁 ,  常晏鹏 ,  何洪流 ,  李佳 ,  张良 ,  孟繁中 ,  党向磊 ,  胡燕林 ,  孙笑科 ,  吴昊 ,  暴恒

IPC: G06K9/62 ,  G06V20/40 ,  G06V10/80 ,  G06V10/764 ,  G10L25/03 ,  G06F16/783 ,  G06Q50/26

Abstract: 本发明公开了一种基于多模态数据特征融合的暴恐视频检测方法，包括数据预处理模块、视频特征抽取模块、音频特征抽取模块、特征融合模块和分类输出模块；所述数据预处理模块在使用时：S1、分割视频，分割后得到音频信息和视频信息；S2、音频信息保存为文件；S3、将视频信息做截帧处理，将所有原始帧按照顺序调整尺寸为256*256，之后进行随机裁剪大小至224*224并做归一化处理，本方法的图像样本是取自国内外真实的暴恐视频，利用高维特征融合分类，并经过验证与测试后，证明此方法在对真实环境下暴恐视频的检测具有很高的准确度，可有效地帮助各类业务进行落地。

公开(公告)号：CN115344743A

公开(公告)日：2022-11-15

申请号：CN202210857330.7

申请日：2022-07-20

Applicant: 国家计算机网络与信息安全管理中心青海分中心 ,  长安通信科技有限责任公司

Inventor： 孟繁中 ,  王克斌 ,  吴登伟 ,  郑丽 ,  裴宜春 ,  赵晋宁 ,  常晏鹏 ,  何洪流 ,  李怡辰 ,  李佳 ,  张良 ,  党向磊 ,  胡燕林 ,  孙笑科 ,  吴昊 ,  暴恒

IPC: G06F16/732 ,  G06F16/738 ,  G06F16/783 ,  G06F16/75 ,  G06V20/40 ,  G06V20/62

Abstract: 本发明公开了一种利用关键帧检索涉政视频的方法，包括视频输入、图像输入、文字提取、关键帧提取、特征提取、faiss库检索、结果返回，关键帧提取包括切帧处理、帧间差数值处理、平滑处理、差分值选取、图像处理，关键帧提取此模块采用帧间差法提取关键帧。原理为将两帧图像进行差分，得到图像的平均像素强度可以用来衡量两帧图像的变化大小。基于帧间差分的平均强度，通过本发明，该方法采用视频关键帧构建检索库，相比全部帧比对的方法，能够提高性能；该方法将涉政视频分类构建库，包含了先验标签，保证其结果准确；该方法在帧图像特征提取时采用ShuffleNet，该网络结构具有复杂网络的量化调整能力，高维特征提取能力强。