公开(公告)号：CN116524588A

公开(公告)日：2023-08-01

申请号：CN202310317465.9

申请日：2023-03-29

Applicant: 华中科技大学

Inventor： 莫益军 ,  李想 ,  刘辉宇 ,  林宇华

IPC: G06V40/20 ,  G06V20/40 ,  G06V20/52 ,  G06V10/80 ,  G06V10/25 ,  G06V10/77 ,  G06V10/82 ,  G06V10/764 ,  G06N3/0464 ,  G06N3/048 ,  G06N3/082

Abstract: 本发明涉及计算机数据处理和视频监控技术领域，尤其涉及到一种对监控视频中的个体的时空动作检测方法。提出了一种基于层次化关系建模的时空动作检测方法，对输入的视频帧进行特征提取，对个体特征进行强化，然后运用自注意力方法对复杂的空间关系进行建模，对建模后的特征进行合并，得到层次化关系特征；基于层次化关系特征进行动作分类，得到所需的时空动作检测结果。本发明针对多人复杂场景下，对人与环境、人与人的交互关系通过自注意力进行捕获，提升动作分类的精度，提高了时空动作检测效果。此外，通过对个体特征进行强化，提升了对细粒度动作类别的识别能力。