公开(公告)号：CN112487989B

公开(公告)日：2022-07-15

申请号：CN202011384713.4

申请日：2020-12-01

Applicant: 重庆邮电大学

Inventor： 刘思苇 ,  舒坤贤

IPC: G06V40/16 ,  G06V10/25 ,  G06V10/764 ,  G06V10/82 ,  G06K9/62 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明属于人脸表情识别技术领域，特别涉及一种基于胶囊‑长短时记忆神经网络的视频表情识别方法，包括将包括有人脸的视频转换为视频帧；检测视频帧中的人脸图像，并对人脸图像进行预处理；构建胶囊网络，利用胶囊网络提取人脸图像的特征并进行图片的重构；构建长短时记忆神经网络，将胶囊网络编码器的输出作为长短时记忆神经网络的输入，提取时序特征；将长短时记忆神经网络输出中最大概率值对应的表情分类作为该序列的标签；本发明将胶囊网络与长短时记忆网络相结合，胶囊网络提取空间信息，长短时记忆神经网络提取时序信息，从而有效地提升了表情分类的精度。

公开(公告)号：CN112487989A

公开(公告)日：2021-03-12

申请号：CN202011384713.4

申请日：2020-12-01

Applicant: 重庆邮电大学

Inventor： 刘思苇 ,  舒坤贤

IPC: G06K9/00 ,  G06K9/32 ,  G06K9/62 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明属于人脸表情识别技术领域，特别涉及一种基于胶囊‑长短时记忆神经网络的视频表情识别方法，包括将包括有人脸的视频转换为视频帧；检测视频帧中的人脸图像，并对人脸图像进行预处理；构建胶囊网络，利用胶囊网络提取人脸图像的特征并进行图片的重构；构建长短时记忆神经网络，将胶囊网络编码器的输出作为长短时记忆神经网络的输入，提取时序特征；将长短时记忆神经网络输出中最大概率值对应的表情分类作为该序列的标签；本发明将胶囊网络与长短时记忆网络相结合，胶囊网络提取空间信息，长短时记忆神经网络提取时序信息，从而有效地提升了表情分类的精度。