-
公开(公告)号:CN116884412A
公开(公告)日:2023-10-13
申请号:CN202310835916.8
申请日:2023-07-07
Applicant: 重庆邮电大学
IPC: G10L15/25 , G10L15/16 , G06V10/80 , G06N3/0464 , G06N3/08
Abstract: 本发明涉及一种基于混合三维残差门控循环单元的唇语识别方法,属于唇语识别领域,包括以下步骤:S1:以唇部图像特征序列为对象,设计混合数据训练,对数据进行增强;S2:以采用融合残差和时空卷积的网络作为前端网络,以产生序列的最终表示;S3:构建基于序列信息门控网络的后端网络,对唇语进行识别。本发明解决了唇语识别中常见的唇形相似性高、数据量少的难题。