公开(公告)号：CN115860104A

公开(公告)日：2023-03-28

申请号：CN202211386351.1

申请日：2022-11-07

Applicant: 哈尔滨工程大学

Inventor： 王念滨 ,  胡文宁 ,  王永乐 ,  何鸣 ,  王勇 ,  周连科 ,  王红滨 ,  孙彧

IPC: G06N3/092 ,  G06N3/047 ,  G06N3/045

Abstract: 基于不确定性感知分层强化学习的迷宫导航策略学习方法，为了解决迷宫导航的分层强化学习训练阶段存在诸多不确定因素，导致分层强化学习的高层策略训练不稳定，使智能体决策准确率较低的问题，确定迷宫导航分层强化学习中影响高层策略训练稳定性的因素；获取迷宫导航的训练数据集；利用训练数据集对构建的动作不确定性估计网络进行训练，输入迷宫导航中智能体的状态和任务目标，输出伪子目标，得到训练好的动作不确定性估计网络；利用伪子目标约束分层强化学习高层策略的训练过程，得到子目标；利用子目标约束分层强化学习低层策略的训练过程，得到智能体的动作，计算低层策略的期望最大化平均奖励回报，回报值越大，迷宫导航策略学习越成功。

公开(公告)号：CN116913317A

公开(公告)日：2023-10-20

申请号：CN202310859687.3

申请日：2023-07-13

Applicant: 哈尔滨工程大学 ,  江苏科技大学

Inventor： 何鸣 ,  王永乐 ,  董浩亮 ,  王金满 ,  王红滨 ,  周连科 ,  王念滨 ,  孙彧

IPC: G10L25/51 ,  G06N3/084 ,  G06N3/0464 ,  G10L25/90 ,  G10L25/30 ,  G10L21/0208

Abstract: 基于声重组特征网络的水面航行器声信号基频提取方法，属于基频提取领域。本发明解决了现有基频提取任务的声信号特征提取方法存在处理方式复杂、鲁棒性差的问题。本发明将待进行基频提取的声信号按照LHS算法产生的最小帧长切割成等长的音频段；采用LHS算法对所述等长的音频段的基频进行标记；采用声重组特征网络提取音频段的声信号的基频特征；采用基频提取网络利用基频特征对对应的音频段进行基频提取。本发明适用于基频提取。