公开(公告)号：CN116662924A

公开(公告)日：2023-08-29

申请号：CN202310273760.9

申请日：2023-03-20

Applicant: 重庆邮电大学

Inventor： 梁燕 ,  侯增辉 ,  尹恩同 ,  陈思旭 ,  徐露

IPC: G06F18/25 ,  G06F18/24 ,  G06F40/30 ,  G06V10/40 ,  G06V10/82 ,  G06N3/048 ,  G06N3/08 ,  G06N3/0464

Abstract: 本发明请求保护一种双通道与注意力机制的方面级多模情感分析方法，该方法以神经网络为基础，通过方面词特征和文本特征联合注意力机制多尺度提取图像特征中包含的情感信息，并且将GCN网络引入方面级多模态情感分析任务中，大大提升了模型的特征提取和交互融合能力。本发明中，在特征提取层采用预训练编码器提取方面词、文本特征和图像特征，在注意力机制层，方面词和句子特征双向融合后，得到最终的方面词特征和句子特征表示。图像特征通过通道注意力机制和空间注意力机制建立起图像特征提取网络，最后，通过GCN模块动态提取各模态的交互融合特征。在实验中，基于注意力机制的方面级多模态情感分析在数据集上的性能指标均得到提升。