一种基于视频的AU检测方法

    公开(公告)号:CN109508660A

    公开(公告)日:2019-03-22

    申请号:CN201811287115.8

    申请日:2018-10-31

    CPC classification number: G06K9/00315 G06K9/627

    Abstract: 本发明涉及一种基于视频的AU检测方法,包括:人脸处理步骤:获取待测视频,以T秒为间隔从待测视频中抽取连续K帧图片,对所述连续K帧图片依次进行人脸检测、人脸特征点检测及人脸对齐处理,获得人脸序列;AU检测步骤:根据所述人脸序列和经训练的AU检测模型进行AU检测,获得待测视频的AU表现情况;所述AU检测模型基于卷积神经网络和时间递归网络建立。与现有技术相比,本发明可实现AU自动化检测工作,减轻人工标注人员的工作量,考虑了AU在人脸的区域分布性质、时间序列上人脸表情之间的相关性和AU之间存在相关性,大大提升了AU检测的准确率。

Patent Agency Ranking