一种基于语义推理的行为检测方法及系统

    公开(公告)号:CN117373119A

    公开(公告)日:2024-01-09

    申请号:CN202311318838.0

    申请日:2023-10-12

    Abstract: 本发明涉及一种基于语义推理的行为检测方法及系统,包括:获取待检测的视频数据,对视频数据进行抽帧操作得到第一视频数据样本,提取目标行为的运动特征和目标行为的空间特征;并利用非局部神经网络注意力机制进行特征增强融合得到目标行为的综合特征;获取原始视频数据训练集,根据各类别的行为标签在原始视频数据训练集中的共现关系构建非对称共现矩阵;利用语义关系推理模块SIM进行语义关系推理得到各类别行为标签的语义关系信息词向量表示;根据各类别行为标签的语义关系信息词向量表示和目标行为的综合特征计算目标在各类别行为标签的得分;基于预设的得分阈值输出目标在待检测的视频数据中的所有行为。

Patent Agency Ranking