基于多特征协同作用的语音情感识别方法

    公开(公告)号:CN117854538A

    公开(公告)日:2024-04-09

    申请号:CN202311862197.5

    申请日:2023-12-29

    Inventor: 胡敏 李敏 黄宏程

    Abstract: 本发明涉及一种基于多特征协同作用的语音情感识别方法,属于人机交互领域。通过构建基于欧几里得距离的图卷积神经网络提取高级声学特征,使用预训练的自动语音识别模型通过情感识别任务进行优化进而提取语义特征,由于声学特征和语义特征从不同角度描述了情感信息,因此提出双向协同注意力机制将声学特征和语义特征进行充分的交互,同时专注于最相关的特征以有效解决信息冗余问题。本发明通过提取语音的声学特征和语义特征,并将声学特征和语义特征融合,充分提取和利用了语音中的情感信息,专注于最相关的特征,有效解决了信息冗余问题,有效提高了语音情感识别的准确性。

    一种基于图强化学习的DT边缘网络任务卸载方法

    公开(公告)号:CN117812078A

    公开(公告)日:2024-04-02

    申请号:CN202311850206.9

    申请日:2023-12-29

    Inventor: 黄宏程 罗倩 胡敏

    Abstract: 本发明涉及一种基于图强化学习的DT边缘网络任务卸载方法,属于移动边缘计算技术领域。该所述方法包括如下步骤:S1、基于数字孪生技术构建MEC网络系统模型;S2、根据MEC网络系统模型的动态和去中心化环境,将任务卸载问题转化为去中心化的部分可观察马尔科夫决策过程;S3、结合图纸里网络与多智能体强化学习算法提出GATMARL算法以解决部分可观察马尔科夫决策过程问题,从而获得边缘网络任务协作卸载策略。本发明采用基于图注意力的价值分解网络来帮助BS代理将更多注意力分配给其他BS的价值信息,以学习更好的协作卸载策略,以最大化所有UE的QoE效用。

    物联网服务组合优化方法
    34.
    发明公开

    公开(公告)号:CN117811946A

    公开(公告)日:2024-04-02

    申请号:CN202311850263.7

    申请日:2023-12-29

    Inventor: 胡敏 陈伟 黄宏程

    Abstract: 本发明涉及一种物联网服务组合优化方法,属于物联网领域。本发明对于物联网环境下大规模的服务组合问题进行研究,提出了一种面向物联网环境下的蚁群算法,融合了多个属性的QoS,并结合了物联网环境下设备受地理位置,设备本身的通信半径等因素制约的特殊性,将QoS多属性与蚁群算法相结合,解决了基于QoS的大规模物联网服务组合问题。

    多粒度匹配的跨模态行人重识别方法

    公开(公告)号:CN117809374A

    公开(公告)日:2024-04-02

    申请号:CN202311850240.6

    申请日:2023-12-29

    Abstract: 本发明涉及一种多粒度匹配的跨模态行人重识别方法,属于图形数据读取领域。该方法包括以下步骤:该方法为:使用RestNet50网络提取图像全局特征,使用Bi‑LSTM网络提取文本特征,然后进行全局匹配;将人体分为头、上衣、下衣、鞋子和背包5个局部部分特征,对5个局部部分特征使用多头注意力机制进一步获取模态内的关系信息,得到更新后的局部特征,后续进行局部匹配;将人体分为头、上衣、下衣、鞋子和背包5个局部部分特征采用图神经网络,构建属性与属性之间的空间关系来聚合更有辨识度的特征,后续进行空间匹配;对全局匹配、局部匹配和空间匹配三个粒度进行联合训练,分别计算全局匹配、局部匹配和空间匹配三个粒度的损失。

    人体姿态信息引导的步态识别系统

    公开(公告)号:CN117809372A

    公开(公告)日:2024-04-02

    申请号:CN202311850221.3

    申请日:2023-12-29

    Inventor: 黄宏程 胡燊 胡敏

    Abstract: 本发明涉及一种人体姿态信息引导的步态识别系统,属于步态识别领域,包括:步态轮廓图像序列采集模块:用于得到步态轮廓图像序列;人体骨架序列采集模块:用于对人体骨架进行提取;混合注意力机制的空间特征提取模块:用于获取步态空间特征;多尺度时间注意力模块:用于对步态轮廓图像序列建模不同时间尺度上的特征;时空特征拼接模块:用于形成步态时空特征;姿态与轮廓特征融合模块:用于获得姿态特征;特征级联模块:用于融合人体姿态信息与步态轮廓序列;训练模块:用于训练步态识别模型;步态识别模块:利用训练好的步态识别模型对视频中的步态进行识别。

    考虑故障优先级的多目标路径优化方法及系统

    公开(公告)号:CN117808183A

    公开(公告)日:2024-04-02

    申请号:CN202311850233.6

    申请日:2023-12-29

    Abstract: 本发明涉及一种考虑故障优先级的多目标路径优化方法及系统,属于物联网领域。该方法先针对计量设备进行故障信息采集,根据故障信息解析计量设备的故障类型以及位置;然后结合故障的严重程度和影响范围计算每个故障的等级以确定故障的检修紧急程度;综合考虑检修过程中检修紧急程度和检修距离计算综合服务代价指标,用于衡量训练路径规划的优劣;以故障等级和巡检路径距离为约束条件,以巡检路径和综合服务代价指标为优化目标,通过蚁群算法获取最优的巡检路径和综合服务代价指标;在所述蚁群算法中引入模拟退火算法以避免蚁群算法陷入局部最优解并提高收敛速度;同时,在所述模拟退火算法中加入回火机制,进一步避免蚁群算法陷入局部最优解。

    一种基于知识图谱的多方人机交互回复拟人化方法

    公开(公告)号:CN116340474A

    公开(公告)日:2023-06-27

    申请号:CN202211612651.7

    申请日:2022-12-15

    Abstract: 本发明涉及一种基于知识图谱的多方人机交互回复拟人化方法,属于人机交互领域。该方法包括以下步骤:S1:多方人机交互情感状态评估;S2:知识图谱水波纹传播。通过采取知识图谱表征的方式来挖掘多方的相似经历以找到潜在感兴趣的对话内容,而相似的经历体验促使用户共享情绪体验和群体感受,利用VAD情感字典向模型引入额外的情感信息加以形式化表示,使机器人感受到多方的情绪,并将情绪反馈给多方,从而产生情感上更加合适、内容上更加丰富的回复。在多方对话数据集上进行实验,实验结果表明,兼具情感温度与知识深度的多方人机交互系统,能够吸引其余各方的注意,成为多方的焦点。

    一种社交物联网中协作设备组构建方法

    公开(公告)号:CN116248715A

    公开(公告)日:2023-06-09

    申请号:CN202211697233.2

    申请日:2022-12-28

    Abstract: 本发明涉及一种社交物联网中协作设备组构建方法,属于物联网领域。该方法是首先构建一个异构社交图、任务集、SIoT对象之间的社交关系以及每个SIoT对象和任务之间的关系;同时根据不同的实际需求,应用不同的约束,构建基于减少通信损失或增加鲁棒性的设备组选择方法。本发明解决了在SIoT环境中收到服务请求时查询最佳智能设备组的问题,针对不同场景,分别考虑减少通信损失或增加鲁棒性并定制不同的策略,即通过考虑社交物联网中不同设备之间的交互来为某些任务找到最佳的设备组。

Patent Agency Ranking