公开(公告)号：CN120046695A

公开(公告)日：2025-05-27

申请号：CN202510101924.9

申请日：2025-01-22

Applicant: 华东理工大学

Inventor： 严怀成 ,  李家根 ,  俞睿 ,  吕云凯 ,  高生 ,  李郅辰 ,  王孟 ,  吴征天 ,  徐龙 ,  郑元义 ,  常雨芳

IPC: G06N3/096 ,  G06N3/045 ,  G06F18/25

Abstract: 本发明提供一种基于知识蒸馏和动态融合机制的多模态情感分析方法，包括预训练单模态教师模型；利用单模态教师模型指导多模态学生模型学习，并通过交互式知识蒸馏机制，将教师模型的中间层概率分布作为目标，学习模态间相关性和跨模态特性；交互式知识蒸馏包括三个损失函数：首先，计算教师模型和学生模型的输出层输出分布的差异，定义为跨模态知识蒸馏损失；其次，加入基于真实标签的对齐损失，以交叉熵形式约束学生模型的预测结果接近真实情感标签；最后，引入标签平滑损失软化真实标签。本发明保存预训练的具有较好表现的单模态教师模型，用于指导多模态学生模型学习，同时引入损失函数优化多模态学生模型，使其逐渐对齐教师模型的输出分布，同时增强其对模态异质性的适应能力。单模态教师模型大幅度降低模型复杂度，减少计算量，在多模态情感分析领域有较好表现。

公开(公告)号：CN116055471A

公开(公告)日：2023-05-02

申请号：CN202310035373.1

申请日：2023-01-10

Applicant: 华东理工大学

Inventor： 严怀成 ,  张海文 ,  俞睿 ,  刘其纬 ,  吴宗华 ,  王浩源 ,  陈强 ,  李郅辰 ,  田永笑 ,  王曰英 ,  常玉芳 ,  张皓

IPC: H04L67/02 ,  G06F9/448 ,  H04L67/133 ,  H04L67/141

Abstract: 本发明涉及一种基于Json‑RPC的异步数据处理系统及其子系统间通讯方法，其中方法包括以下步骤：Web前端请求数据处理；Java后端服务模块异步调用RPC客户端模块，并立即响应Web前端；RPC客户端模块请求RPC服务端模块；RPC服务端模块调用Python算法模块进行数据处理，处理结束后将结果存储至数据库中；Java后端接收RPC服务端模块响应，并基于WebSocket推送实时处理消息到Web前端；Web前端可视化显示数据处理结果。与现有技术相比，本发明具有传输数据格小，便于调试、实现、扩展，通讯效率高等优点。