公开(公告)号：CN119832635A

公开(公告)日：2025-04-15

申请号：CN202411896793.X

申请日：2024-12-23

Applicant: 郑州轻工业大学

Inventor： 武东辉 ,  刘国志 ,  朱向前 ,  赵婉婉 ,  杨佳慧 ,  王金凤 ,  王永东 ,  白振鹏 ,  万振杰 ,  耿鑫 ,  牛聪 ,  桂阳海

IPC: G06V40/20 ,  G06V10/80 ,  G06V10/82 ,  G06V10/764 ,  G06V20/40 ,  G06N3/0442 ,  G06N3/045 ,  G06N3/0464 ,  G06N3/084

Abstract: 本发明提出一种基于MSA‑CLSTM身体局部活跃度的双人交互行为识别方法，首先，使用姿态估计技术从RGB视频中提取交互人物的人体骨架关键点序列；通过人体局部活跃度评估器对人体骨架序列关键点进行活跃度评估，生成人体局部权重，对原始骨架序列加权获得关键点坐标特征流；计算人体骨架关键点之间的相对距离，由二维离散小波变换以及空间注意力机制生成关键点相对位置特征流以及相互特征流；由人体骨架原始数据计算局部骨骼方向以及根据人体骨骼自然连接方式计算骨骼间夹角，生成局部骨骼方向特征流；最后，通过多特征流融合模型实现四个特征流融合，根据融合后的特征计算得到双人交互动作类别，完成双人交互行为识别。