公开(公告)号：CN111460928A

公开(公告)日：2020-07-28

申请号：CN202010186272.0

申请日：2020-03-17

Applicant: 中国科学院计算技术研究所

Inventor： 夏时洪 ,  温玉辉 ,  高林 ,  钟重阳

IPC: G06K9/00 ,  G06K9/62 ,  G06N3/04

Abstract: 本发明提供了一种基于胶囊网络的人体动作识别系统及方法，构建包含基于语义图式图卷积的语义时空模块、广义注意力非局部模块、初级胶囊层和分类胶囊层组成的网络架构，将基于胶囊网络的架构用于基于骨架序列数据的动作识别，该网络架构利用图卷积和时间域卷积层提取骨架数据的时空特征，胶囊机制能够保持更为丰富的用于动作分类的信息，本发明进一步将广义注意力机制引入到胶囊网络架构中，建立细粒度全局依赖更好地表达时空特征，用于引导更为有效的初级胶囊的生成，初级胶囊通过路由算法与最相关的分类胶囊之间建立联系，从而提高人体动作识别准确性。

公开(公告)号：CN111460928B

公开(公告)日：2023-07-21

申请号：CN202010186272.0

申请日：2020-03-17

Applicant: 中国科学院计算技术研究所

Inventor： 夏时洪 ,  温玉辉 ,  高林 ,  钟重阳

IPC: G06V40/20 ,  G06V10/62 ,  G06V10/764 ,  G06V10/77 ,  G06V10/82 ,  G06N3/042 ,  G06N3/045 ,  G06N3/0464 ,  G06N3/048

Abstract: 本发明提供了一种基于胶囊网络的人体动作识别系统及方法，构建包含基于语义图式图卷积的语义时空模块、广义注意力非局部模块、初级胶囊层和分类胶囊层组成的网络架构，将基于胶囊网络的架构用于基于骨架序列数据的动作识别，该网络架构利用图卷积和时间域卷积层提取骨架数据的时空特征，胶囊机制能够保持更为丰富的用于动作分类的信息，本发明进一步将广义注意力机制引入到胶囊网络架构中，建立细粒度全局依赖更好地表达时空特征，用于引导更为有效的初级胶囊的生成，初级胶囊通过路由算法与最相关的分类胶囊之间建立联系，从而提高人体动作识别准确性。