基于ETM-MDQN的无人机自适应路径规划方法、装置及介质

    公开(公告)号:CN118192635A

    公开(公告)日:2024-06-14

    申请号:CN202410407734.5

    申请日:2024-04-07

    Applicant: 海南大学

    Abstract: 本发明涉及一种基于ETM‑MDQN的无人机自适应路径规划方法、装置及介质,其中方法包括以下步骤:构建深度强化学习MDQN网络,将无人机路径规划问题建模为马尔可夫决策过程;根据无人机与障碍物的实际距离状态和状态变化误差设定事件触发机制的触发条件,当满足预设的事件触发条件时更新无人机的动作策略和MDQN网络的Q值;通过最小化损失函数优化MDQN网络的参数;利用优化后的MDQN网络进行实时无人机自适应路径规划。与现有技术相比,本发明充分利用计算资源,考虑了未来多个时间步的奖励,提高了复杂环境下路径规划策略的鲁棒性和有效性。

    基于MPC-NDQN的无人机着艇方法、设备、介质

    公开(公告)号:CN118192584A

    公开(公告)日:2024-06-14

    申请号:CN202410406939.1

    申请日:2024-04-07

    Applicant: 海南大学

    Abstract: 本发明涉及一种基于MPC‑NDQN的无人机着艇方法、设备、介质,方法包括如下步骤:通过构建无人机动力学模型,得到基于输入控制量和状态变量的离散化的线性状态空间方程,通过MPC得到未来一段时间内的着艇轨迹;基于着艇轨迹,利用NDQN更新噪声网络的网络参数;基于更新后的噪声网络得到最优动作,实现无人机飞行姿态的控制,NDQN中,以无人机的位姿和降落点的坐标作为状态空间,以无人机的飞行姿态作为动作空间,以着艇轨迹跟踪率作为奖励函数,且采用计及新老信息置信度和远见程度的价值函数。NDQN网络中带有标准正态分布的噪声,能在训练时产生一定的随机性,因此无人机即使在不确定的环境下也能精准跟踪最优着艇轨迹。

    一种多无人机视域下目标跟踪方法、装置、设备及介质

    公开(公告)号:CN118155098A

    公开(公告)日:2024-06-07

    申请号:CN202410305631.8

    申请日:2024-03-18

    Applicant: 海南大学

    Abstract: 本发明涉及一种多无人机视域下目标跟踪方法、装置、设备及介质,在目标跟踪过程中,该方法重复的执行以下步骤:获取多无人机拍摄的图像并进行实时更新;将时序图像序列按照顺序输入Transformer网络进行特征提取,其中,第一帧图像作为初始化的目标模板,后续帧图像作为待搜索区域图像;将目标模板的特征图分别输入两路不同的卷积层,得到分类支路和回归支路,同时,将待搜索区域的特征图输入一个卷积层,得到卷积结果;分别用分类支路和回归支路作为卷积核对卷积结果进行卷积,得到分类结果和回归结果,回归结果作为目标框的检测结果,实现目标跟踪;基于目标框的检测结果与当前目标模板的相似度进行目标模板更新。与现有技术相比,本发明可以在较大范围内对运动目标进行持续准确的跟踪。

    一种无人机集群的运行状态估计方法

    公开(公告)号:CN116244647A

    公开(公告)日:2023-06-09

    申请号:CN202211591739.5

    申请日:2022-12-11

    Applicant: 海南大学

    Abstract: 本发明涉及一种无人机集群的运行状态估计方法,包括以下步骤:针对复杂环境下无人机集群运行状态的强耦合指标集,基于随机森林分析指标间的相互作用,处理数据集的异常值和噪声,对其进行特征重要性排序,提取关键运行指标;基于深度强化学习DDQN算法估计无人机集群的运行状况,将状态估计问题用马尔可夫过程描述,并通过使用双层网络以获得准确的价值函数;通过迭代更新DDQN网络的参数,输出无人机集群状态的最优价值函数,实时估计集群的运行状态。与现有技术相比,本发明具有提高了无人机集群的运行效率和安全性等优点。

Patent Agency Ranking