一种基于移位图卷积神经网络骨骼点行为识别系统及其识别方法

    公开(公告)号:CN111582220B

    公开(公告)日:2023-05-26

    申请号:CN202010419839.4

    申请日:2020-05-18

    Inventor: 张一帆 程科 程健

    Abstract: 本发明公开了一种基于移位图卷积神经网络骨骼点行为识别系统包括:图像获取模块、图像处理模块、提取模块和行为识别模块,其中图像获取模块用于获取行为图像;图像处理模块用于处理图像获取模块获取的行为图像进行图像处理;提取模块用于提取图像处理模块处理后图像的骨骼点;行为识别模块用于识别提取模块提取骨骼点行为特征的。本发明设计行为识别模块进行对骨骼点行为识别,减小图卷积计算量的新型图卷积,与传统图卷积不同,移位图卷积不是通过扩大卷积核来扩展感受范围,而是通过新型移位操作来使得图特征进行移位拼接,在显著减少计算量提高计算速度的情况下达到同样甚至更高的识别精度,避免传统图卷积的计算量会随着卷积核增大而增大。

    一种高效运动互补神经网络系统

    公开(公告)号:CN111104553B

    公开(公告)日:2023-12-12

    申请号:CN202010012178.3

    申请日:2020-01-07

    Inventor: 张一帆 程科 程健

    Abstract: 本发明公开了一种高效运动互补神经网络系统,包括视频读取单元、视频类别单元和神经网络补充单元;所述视频读取单元对输入的视频进行读取,同时对视频的描述信息等文字辅助信息进行提取;所述视频类别单元根据网络等视频提取源对视频的描述信息对视频的类别进行初步判定,并将视频划分到神经网络中已有的类别分区中;所述神经网络补充单元分成两个模块,对视频分类的方法进行优化,缩短视频分类的时间。本发明针对双流法和3D卷积法分别做出提高计算光流效率和缩小网络计算量的优化方法,提升了视频提取和分类的速度。

    一种高效运动互补神经网络系统

    公开(公告)号:CN111104553A

    公开(公告)日:2020-05-05

    申请号:CN202010012178.3

    申请日:2020-01-07

    Inventor: 张一帆 程科 程健

    Abstract: 本发明公开了一种高效运动互补神经网络系统,包括视频读取单元、视频类别单元和神经网络补充单元;所述视频读取单元对输入的视频进行读取,同时对视频的描述信息等文字辅助信息进行提取;所述视频类别单元根据网络等视频提取源对视频的描述信息对视频的类别进行初步判定,并将视频划分到神经网络中已有的类别分区中;所述神经网络补充单元分成两个模块,对视频分类的方法进行优化,缩短视频分类的时间。本发明针对双流法和3D卷积法分别做出提高计算光流效率和缩小网络计算量的优化方法,提升了视频提取和分类的速度。

    一种基于移位图卷积神经网络骨骼点行为识别系统及其识别方法

    公开(公告)号:CN111582220A

    公开(公告)日:2020-08-25

    申请号:CN202010419839.4

    申请日:2020-05-18

    Inventor: 张一帆 程科 程健

    Abstract: 本发明公开了一种基于移位图卷积神经网络骨骼点行为识别系统包括:图像获取模块、图像处理模块、提取模块和行为识别模块,其中图像获取模块用于获取行为图像;图像处理模块用于处理图像获取模块获取的行为图像进行图像处理;提取模块用于提取图像处理模块处理后图像的骨骼点;行为识别模块用于识别提取模块提取骨骼点行为特征的。本发明设计行为识别模块进行对骨骼点行为识别,减小图卷积计算量的新型图卷积,与传统图卷积不同,移位图卷积不是通过扩大卷积核来扩展感受范围,而是通过新型移位操作来使得图特征进行移位拼接,在显著减少计算量提高计算速度的情况下达到同样甚至更高的识别精度,避免传统图卷积的计算量会随着卷积核增大而增大。

Patent Agency Ranking