基于Reders模型的手势识别方法

    公开(公告)号:CN113743247A

    公开(公告)日:2021-12-03

    申请号:CN202110936677.6

    申请日:2021-08-16

    Abstract: 本发明公开了基于Reders模型的手势识别方法,具体包括以下步骤:选择训练数据集,借助IPN Hand数据集以及自行拍摄的少量视频数据作为训练数据集;使用MediaPipe框架对训练数据集中的视频进行逐帧的手部姿态估计,提取到多帧手势信息;采用基于人体姿态估计的光流算法,将提取到的手势信息转换成时序数据信息;建立孪生网络,将处理得到的时序光流数据输入,进行训练及优化得到预训练模型;将预训练模型进行迁移训练,得到最终模型。本发明采用了孪生网络架构,在解决了因数据集不完备导致的小样本学习问题的同时,为后续拓展增添新的手势动作提供了方便快捷高效的解决方案。

Patent Agency Ranking