一种多域对抗学习的小样本条件下复合表情识别方法

    公开(公告)号:CN114882578B

    公开(公告)日:2022-09-06

    申请号:CN202210812089.6

    申请日:2022-07-12

    Abstract: 本发明公开了多域对抗学习的小样本条件下复合表情识别方法,属于计算机视觉人脸表情识别领域。为了在小样本条件下提取多样性和复杂性的复合表情特征,融合多个小样本数据集,并划分表情子域,利用多域对抗学习提高识别复合表情的性能。基于生成对抗网络框架,将人脸域、轮廓无关的复合表情域融合在生成网络中以增强多样性和复杂性,设计了两个鉴别器引导生成器。人脸鉴别器使用人脸域,引导并鉴别生成器生成表情无关的人脸身份属性,让生成器具有身份多样性;复合表情融合鉴别器分别将基础表情域和轮廓相关的复合表情域融合在一起,引导并鉴别生成器生成的表情具有复杂性。从而获得兼具多样性和复杂性的高性能鉴别器,提高复合表情的识别性能。

    一种多域对抗学习的小样本条件下复合表情识别方法

    公开(公告)号:CN114882578A

    公开(公告)日:2022-08-09

    申请号:CN202210812089.6

    申请日:2022-07-12

    Abstract: 本发明公开了多域对抗学习的小样本条件下复合表情识别方法,属于计算机视觉人脸表情识别领域。为了在小样本条件下提取多样性和复杂性的复合表情特征,融合多个小样本数据集,并划分表情子域,利用多域对抗学习提高识别复合表情的性能。基于生成对抗网络框架,将人脸域、轮廓无关的复合表情域融合在生成网络中以增强多样性和复杂性,设计了两个鉴别器引导生成器。人脸鉴别器使用人脸域,引导并鉴别生成器生成表情无关的人脸身份属性,让生成器具有身份多样性;复合表情融合鉴别器分别将基础表情域和轮廓相关的复合表情域融合在一起,引导并鉴别生成器生成的表情具有复杂性。从而获得兼具多样性和复杂性的高性能鉴别器,提高复合表情的识别性能。

    一种面向跨身份一致性的面部运动单元检测模型构建方法

    公开(公告)号:CN116311477B

    公开(公告)日:2023-08-01

    申请号:CN202310543543.7

    申请日:2023-05-15

    Abstract: 本发明属于计算机视觉与情感计算领域,具体涉及一种面向跨身份一致性的面部运动单元检测模型构建方法,包括:提出一种训练样本选择策略,提高每帧图像的困难正样本和困难负样本在训练样本集中的占比;还提出对比学习,在每次迭代训练时,计算第一对比损失,用于引导分离模块输出的相同身份的身份特征嵌入编码在空间中距离相近,不同身份的身份特征嵌入编码在空间中距离远离;计算第二对比损失,用于引导分离模块输出的相同面部运动单元标签的面部运动特征嵌入编码在空间中距离相近,不同面部运动单元标签的面部运动特征嵌入编码在空间中距离远离。本方法通过隐式地引入面部运动单元跨身份一致性定义先验知识,使得模型有效学习面部运动单元表征。

    一种基于分层特征对齐的面部动作单元检测模型构建方法

    公开(公告)号:CN117576765B

    公开(公告)日:2024-03-29

    申请号:CN202410054740.7

    申请日:2024-01-15

    Abstract: 本发明公开了一种基于分层特征对齐的面部动作单元检测模型构建方法,属于计算机视觉与情感计算领域,包括:搭建面部动作单元检测模型,并采用训练样本集对面部动作单元检测模型训练,训练样本为面部运动图片,标签为每个样本对应的AU组合;构建类内一致性对齐、类间一致性对齐及样本级别一致性对齐的分层特征对齐框架,通过分层的方式提升对跨身份一致性引入的微弱变化的感知能力。同时,在AU特征嵌入之前,通过重要性感知融合层对融合的特征图中每个位置进行区域重要性感知,得到重要性感知的局部特征嵌入,以增强重要区域的特征,提高面部动作特征的可区分性。本发明能够提升面部动作单元检测的准确度。

    一种基于分层特征对齐的面部动作单元检测模型构建方法

    公开(公告)号:CN117576765A

    公开(公告)日:2024-02-20

    申请号:CN202410054740.7

    申请日:2024-01-15

    Abstract: 本发明公开了一种基于分层特征对齐的面部动作单元检测模型构建方法,属于计算机视觉与情感计算领域,包括:搭建面部动作单元检测模型,并采用训练样本集对面部动作单元检测模型训练,训练样本为面部运动图片,标签为每个样本对应的AU组合;构建类内一致性对齐、类间一致性对齐及样本级别一致性对齐的分层特征对齐框架,通过分层的方式提升对跨身份一致性引入的微弱变化的感知能力。同时,在AU特征嵌入之前,通过重要性感知融合层对融合的特征图中每个位置进行区域重要性感知,得到重要性感知的局部特征嵌入,以增强重要区域的特征,提高面部动作特征的可区分性。本发明能够提升面部动作单元检测的准确度。

    一种面向跨身份一致性的面部运动单元检测模型构建方法

    公开(公告)号:CN116311477A

    公开(公告)日:2023-06-23

    申请号:CN202310543543.7

    申请日:2023-05-15

    Abstract: 本发明属于计算机视觉与情感计算领域,具体涉及一种面向跨身份一致性的面部运动单元检测模型构建方法,包括:提出一种训练样本选择策略,提高每帧图像的困难正样本和困难负样本在训练样本集中的占比;还提出对比学习,在每次迭代训练时,计算第一对比损失,用于引导分离模块输出的相同身份的身份特征嵌入编码在空间中距离相近,不同身份的身份特征嵌入编码在空间中距离远离;计算第二对比损失,用于引导分离模块输出的相同面部运动单元标签的面部运动特征嵌入编码在空间中距离相近,不同面部运动单元标签的面部运动特征嵌入编码在空间中距离远离。本方法通过隐式地引入面部运动单元跨身份一致性定义先验知识,使得模型有效学习面部运动单元表征。

Patent Agency Ranking