公开(公告)号：CN116612352A

公开(公告)日：2023-08-18

申请号：CN202310605077.0

申请日：2023-05-26

Applicant: 南京信息工程大学

Inventor： 姜胜芹 ,  王庆 ,  蒋子凌 ,  刘青山

IPC: G06V10/774 ,  G06V10/776 ,  G06V10/82 ,  G06V10/80 ,  G06V20/40 ,  G06N3/045 ,  G06N3/0464 ,  G06N3/09

Abstract: 本发明公开了一种时空交织的行为识别网络模型构建方法及装置，所述方法包括：加载视频数据并提取视频帧，对视频帧进行随机裁剪和随机水平翻转，得到模型的输入数据集，将数据集划分为训练集、验证集和测试集；确定时空交织行为识别网络模型结构，该结构包括依次连接的基网络、交互特征协同模块、并行增强伪3D模块和时空差分注意力模块；利用训练集中的数据对时空交织行为识别网络模型进行网络训练，利用验证集中的数据评估模型，一旦找到最佳的参数，则保存最优模型；利用测试集中的数据对最优模型进行测试。本发明在降低计算复杂度的基础上提高对行为识别的精度。