公开(公告)号：CN108921087A

公开(公告)日：2018-11-30

申请号：CN201810699566.6

申请日：2018-06-29

Applicant: 国家计算机网络与信息安全管理中心 ,  中国科学院自动化研究所

Inventor： 李扬曦 ,  杜翠兰 ,  佟玲玲 ,  王晶 ,  缪亚男 ,  胡卫明 ,  王博 ,  邓智方 ,  张宏源

IPC: G06K9/00

Abstract: 本发明涉及计算机视觉技术领域，具体涉及一种视频理解方法，旨在解决如何有效提取视频的密集帧特征和长期时空特征的技术问题。为此目的，本发明提供的视频理解方法首先利用残差网络获取目标视频的视频帧组，然后利用时序关系网络并根据多个视频帧组生成视频的时序关系特征，最后根据时序关系特征预测目标视频的视频行为类别。其中，视频帧组包括两个有序视频帧，每个有序视频帧均包括多个按照时间顺序依次排列的视频帧。基于上述步骤，能够有效获取到目标视频的密集帧特征和长期时空特征，进而可以快速且准确地预测出目标视频的视频行为类别。

公开(公告)号：CN115690645A

公开(公告)日：2023-02-03

申请号：CN202211120031.1

申请日：2022-09-14

Applicant: 国家计算机网络与信息安全管理中心 ,  中国科学院自动化研究所

Inventor： 李扬曦 ,  彭成维 ,  刘科栋 ,  缪亚男 ,  王佩 ,  刘雨帆 ,  李兵 ,  胡卫明 ,  王坚

IPC: G06V20/40 ,  G06V10/764 ,  G06V10/82 ,  G06V10/77 ,  G06V10/46 ,  G06V10/44 ,  G06V10/42 ,  G06V10/50 ,  G06N3/0464 ,  G06N3/0442 ,  G06N3/0455 ,  G06N3/0895 ,  G10L25/51 ,  G10L25/30 ,  G10L25/03

Abstract: 本发明提供一种视频检测方法、装置、设备、存储介质及程序产品，该方法包括：获取待处理视频；对待处理视频的图像进行视觉特征提取，得到视觉特征信息；对待处理视频的语音进行音频特征提取，得到音频特征信息；基于视觉特征信息和音频特征信息，确定待处理视频是否为安全视频。本发明提供的视频检测方法、装置、设备、存储介质及程序产品用于提高对待处理视频进行安全检测的准确性。

公开(公告)号：CN115019087A

公开(公告)日：2022-09-06

申请号：CN202210557333.9

申请日：2022-05-20

Applicant: 国家计算机网络与信息安全管理中心 ,  中国科学院自动化研究所

Inventor： 李扬曦 ,  彭成维 ,  刘科栋 ,  缪亚男 ,  王佩 ,  胡卫明 ,  李兵 ,  刘雨帆 ,  王坚 ,  罗文阳

IPC: G06V10/764 ,  G06V10/774 ,  G06V10/80 ,  G06V10/77

Abstract: 本发明提供一种小样本视频分类和分类模型训练方法及其装置，涉及计算机视觉技术领域，所述分类方法包括：将小样本分类任务输入预先构建的收敛的压缩域长短时Cross‑Transformer模型，获取压缩域信息；基于压缩域信息，获取短时融合的帧特征；基于短时融合的帧特征，获取查询特征，并输出基于查询特征获取的小样本分类任务中查询视频对各个查询类别原型所属支撑类别的分类分数，其中，分类分数最大的支撑类别用于表示查询视频的分类结果。本发明可实现少量示例视频下的快速、高精度、高效率的小样本视频分类。

公开(公告)号：CN109190750B

公开(公告)日：2021-06-08

申请号：CN201810737975.0

申请日：2018-07-06

Applicant: 国家计算机网络与信息安全管理中心 ,  中国科学院自动化研究所

Inventor： 李扬曦 ,  杜翠兰 ,  井雅琪 ,  佟玲玲 ,  张翠 ,  胡卫明 ,  李文娟 ,  薛建明

IPC: G06N3/04 ,  G06N3/08

Abstract: 本发明涉及深度学习技术领域，具体提供了一种基于对抗生成网络的小样本生成方法及装置，旨在解决如何在少量样本数据的情况下利用生成对抗网络生成样本数据的技术问题。为此目的，本发明提供的基于对抗生成网络的小样本生成方法能够基于对抗生成网络并根据随机噪声和标签信息，生成小样本类型对应的样本。在此过程中，本发明采用迁移学习和批量训练的方法对对抗生成网络进行网络训练，使生成对抗网络可以有效迁移应用于少量样本的对抗生成网络样本生成任务中。

公开(公告)号：CN110674673A

公开(公告)日：2020-01-10

申请号：CN201910697979.5

申请日：2019-07-31

Applicant: 国家计算机网络与信息安全管理中心

Inventor： 段运强 ,  井雅琪 ,  原春锋 ,  时磊 ,  李扬曦 ,  胡燕林 ,  郭承禹 ,  张翠 ,  佟玲玲 ,  段东圣 ,  任博雅 ,  谢程利 ,  刘雨帆 ,  张子琦 ,  胡卫明

IPC: G06K9/00 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明提出了一种视频关键帧抽取方法、装置和存储介质，用以减少视频处理过程中的冗余信息，提高视频处理速度。所述视频关键帧抽取方法，包括：从待分析视频中提取I帧；针对提取的每一I帧，利用深度哈希网络确定其对应的深度哈希码，所述深度哈希网络为利用预先生成的图像样本对进行训练得到的；根据各I帧对应的深度哈希码，分别确定两两I帧深度哈希码之间的汉明距离；根据两两I帧深度哈希码之间的汉明距离，对提取的I帧进行聚类；针对每一聚类，分别确定该聚类中包含的每一I帧的信息熵；从每一聚类中，提取信息熵最大的I帧组成所述待分析视频的关键帧。