公开(公告)号：CN119514592A

公开(公告)日：2025-02-25

申请号：CN202411516839.0

申请日：2024-10-29

Applicant: 郑州轻工业大学

Inventor： 李祖贺 ,  郭翔 ,  王春秀 ,  张永霞 ,  吴怀广 ,  庾俊 ,  陈浩然 ,  高一凡 ,  许志杰 ,  潘昱杉

IPC: G06N3/0442 ,  G06N3/042

Abstract: 本发明公开了一种图结构优化和表征分离的多模态情感分析方法及系统，涉及多模态情感分析技术领域，包括：将原始视频数据进行处理得到携带时间序列信息的多模态表征；对多模态表征进行样本间数据增强；将样本间数据增强后的多模态表征进行上下文交互处理，得到上下文交互增强多模态表征；将上下文交互增强多模态表征进行情感表征解耦处理，得到蕴含情感信息的多模态表征；根据蕴含情感信息的多模态表征进行情感预测，得到最终的情感预测结果。本发明对模态内表征学习、多模态表征存在异构性以及情感信息进行充分挖掘，提高了多模态情感分析的准确性和鲁棒性。