行为识别的方法、系统、计算机设备和存储介质

    公开(公告)号:CN110298332A

    公开(公告)日:2019-10-01

    申请号:CN201910604800.7

    申请日:2019-07-05

    Applicant: 海南大学

    Inventor: 畅威 叶春杨 周辉

    Abstract: 本申请涉及一种行为识别的方法、系统、计算机设备和存储介质。方法包括:获取待识别的视频;对待识别的视频进行处理提取图片信息和人体姿态信息;将图片信息和人体姿态信息输入预先训练的双流卷积神经网络,获得图像特征和人体姿态特征;将图像特征和人体姿态特征进行注意力融合;对融合后的图像特征和人体姿态特征进行分析,计算每个行为类别之间的相对概率;选择相对概率最高的行为类别为行为的预测值,预测值用于确定行为。上述方法采用双流卷积神经网络,在神经网络的空间流中输入RGB图片,时域流中输入人体姿态信息,不需要计算光流信息,大大减少了计算量以及计算成本;另外,还采用了注意力融合技术,能进一步提高识别的准确率。

Patent Agency Ranking