一种视频人物情感的识别方法、装置、设备和存储介质

    公开(公告)号:CN116824421A

    公开(公告)日:2023-09-29

    申请号:CN202211272191.8

    申请日:2022-10-18

    Inventor: 杨飞 付祖贤

    Abstract: 本申请实施例公开了一种视频人物情感的识别方法、装置、设备和存储介质,该方法包括:通过预处理模块,对目标视频的多个模态中的每个模态提取第一数据特征;通过分层动态时序融合模块,对多个模态的第一数据特征进行融合处理,得到第二数据特征;通过门控时序神经模块,对第二数据特征和第三数据特征进行运算处理,得到第四数据特征,其中,第三数据特征为门控时序神经模块通过上一轮运算处理得到的数据特征;通过情感分类模块,对第四数据特征进行分类处理,得到目标视频中人物的情感类型。这样,通过对多个模态的数据特征进行融合,并结合上一轮的运算处理结果和当前的输入信息进行情感识别,能够提高情感识别的准确率。

Patent Agency Ranking