公开(公告)号：CN109284682A

公开(公告)日：2019-01-29

申请号：CN201810952141.1

申请日：2018-08-21

Applicant: 南京邮电大学

Inventor： 李晓飞 ,  汪长江 ,  吴聪 ,  柴磊

IPC: G06K9/00 ,  G06K9/62

Abstract: 本发明公开了一种基于STT-LSTM网络的手势识别方法，构建STT-LSTM网络模型，该模型含有两层STT-LSTM网络；将RGB特征和光流特征分别传进第一层STT-LSTM网络中，在第一层STT-LSTM网络的训练过程中，进行初始化全局上下文信息，并将初始化的全局上下文信息传入到第二层STT-LSTM网络，在第二层STT-LSTM网络中不断的进行迭代更新，逐步完善上下文信息，将第二层STT-LSTM网络最终输出的关节点进行重组，形成含手势动作信息的节点管道，并作为多分类器预测交警手势的分类标签。本发明方法可准确识别手势指挥动作，能够有效地保证交通的畅通与安全性，降低事故发生几率。

公开(公告)号：CN109284682B

公开(公告)日：2022-06-17

申请号：CN201810952141.1

申请日：2018-08-21

Applicant: 南京邮电大学

Inventor： 李晓飞 ,  汪长江 ,  吴聪 ,  柴磊

IPC: G06V40/20 ,  G06V20/40 ,  G06V10/764 ,  G06V10/82 ,  G06N3/04 ,  G06N3/08 ,  G06K9/62

Abstract: 本发明公开了一种基于STT‑LSTM网络的手势识别方法，构建STT‑LSTM网络模型，该模型含有两层STT‑LSTM网络；将RGB特征和光流特征分别传进第一层STT‑LSTM网络中，在第一层STT‑LSTM网络的训练过程中，进行初始化全局上下文信息，并将初始化的全局上下文信息传入到第二层STT‑LSTM网络，在第二层STT‑LSTM网络中不断的进行迭代更新，逐步完善上下文信息，将第二层STT‑LSTM网络最终输出的关节点进行重组，形成含手势动作信息的节点管道，并作为多分类器预测交警手势的分类标签。本发明方法可准确识别手势指挥动作，能够有效地保证交通的畅通与安全性，降低事故发生几率。