公开(公告)号：CN114980157A

公开(公告)日：2022-08-30

申请号：CN202210405857.6

申请日：2022-04-18

Applicant: 北京科技大学

Inventor： 张海君 ,  张燕霞 ,  李亚博 ,  隆克平 ,  云翔

IPC: H04W24/02 ,  H04W4/40 ,  H04B7/185 ,  G06N20/00

Abstract: 本发明公开了一种无人机中继网络中基于联邦学习的轨迹优化方法及装置，该方法包括：针对多无人机系统，假设无人机系统运行时长为最长飞行时间，将其等比例划分为若干个时隙，在每个时隙中，假定无人机的速度为匀速；然后基于无人机燃料消耗问题，以最大化整个中继网络的容量为目标，构建优化目标模型；中继无人机作为局部端采用强化学习算法进行本地模型训练，获取无人机的最优飞行方向和发射功率，以优化每个时隙内的中继网络容量；基于本地模型训练结果，采用联邦学习实现无人机中继网络中的轨迹优化。本发明基于无人机燃料消耗问题，采用联邦学习进行数据保护，实现了无人机中继网络容量的最大化，可有效提高中继网络的通信性能。

公开(公告)号：CN114422363A

公开(公告)日：2022-04-29

申请号：CN202210028582.9

申请日：2022-01-11

Applicant: 北京科技大学

Inventor： 张海君 ,  黄庙林 ,  王先梅 ,  隆克平 ,  王健全 ,  李卫 ,  云翔

IPC: H04L41/0823 ,  H04L41/14 ,  H04W16/28 ,  G06N3/08

Abstract: 本发明公开了一种无人机搭载RIS辅助通信系统容量优化方法及装置，该通信系统容量优化方法包括：以无人机UAV搭载RIS充当中继，构建UAV搭载RIS辅助通信系统；将UAV搭载RIS辅助通信系统的系统容量优化问题转化为具有用户速率保障和UAV能量消耗约束的UAV轨迹和RIS波束赋形矩阵优化问题；基于深度强化学习算法，获取最优UAV轨迹和最优RIS波束赋形矩阵，在满足用户最低目标数据速率和UAV能量消耗约束下实现系统容量最大化。本发明在解决轨迹和相移问题的同时，可在能耗约束下，实现系统容量最大化。

公开(公告)号：CN115278908A

公开(公告)日：2022-11-01

申请号：CN202210899466.4

申请日：2022-07-28

Applicant: 北京科技大学

Inventor： 张海君 ,  姜铭慧 ,  刘向南 ,  孙立新 ,  云翔 ,  隆克平

IPC: H04W72/10 ,  H04W72/04 ,  H04W74/08 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明提供了一种无线资源分配优化方法及装置，涉及无线通信技术领域。包括：对无线设备进行优先级划分，得到不同优先级的无线设备；对所述不同优先级的无线设备设置不同的接入限制因子；通过基站建立智能体模型，对各类接入限制因子进行决策；通过近端策略优化PPO算法对智能体模型进行训练，获得即时奖励以及智能体模型的不同状态；将所述即时奖励以及智能体模型的不同状态作为转移经验；计算目标函数，通过转移经验对所述目标函数进行深度学习，完成无线资源的分配优化。本发明通过引入裁剪替代目标函数，解决PG算法中步长难以确定的问题。通过迭代循环将证明基于PPO的随机资源分配优化方法及装置的独特性，实现随机接入资源分配的整体经济效益。

公开(公告)号：CN115278908B

公开(公告)日：2024-11-15

申请号：CN202210899466.4

申请日：2022-07-28

Applicant: 北京科技大学

Inventor： 张海君 ,  姜铭慧 ,  刘向南 ,  孙立新 ,  云翔 ,  隆克平

IPC: H04W72/566 ,  H04W72/53 ,  H04W74/0833 ,  G06N3/045 ,  G06N3/08

Abstract: 本发明提供了一种无线资源分配优化方法及装置，涉及无线通信技术领域。包括：对无线设备进行优先级划分，得到不同优先级的无线设备；对所述不同优先级的无线设备设置不同的接入限制因子；通过基站建立智能体模型，对各类接入限制因子进行决策；通过近端策略优化PPO算法对智能体模型进行训练，获得即时奖励以及智能体模型的不同状态；将所述即时奖励以及智能体模型的不同状态作为转移经验；计算目标函数，通过转移经验对所述目标函数进行深度学习，完成无线资源的分配优化。本发明通过引入裁剪替代目标函数，解决PG算法中步长难以确定的问题。通过迭代循环将证明基于PPO的随机资源分配优化方法及装置的独特性，实现随机接入资源分配的整体经济效益。

公开(公告)号：CN114422363B

公开(公告)日：2023-04-21

申请号：CN202210028582.9

申请日：2022-01-11

Applicant: 北京科技大学

Inventor： 张海君 ,  黄庙林 ,  王先梅 ,  隆克平 ,  王健全 ,  李卫 ,  云翔

IPC: H04L41/0823 ,  H04L41/14 ,  H04W16/28 ,  G06N3/08

Abstract: 本发明公开了一种无人机搭载RIS辅助通信系统容量优化方法及装置，该通信系统容量优化方法包括：以无人机UAV搭载RIS充当中继，构建UAV搭载RIS辅助通信系统；将UAV搭载RIS辅助通信系统的系统容量优化问题转化为具有用户速率保障和UAV能量消耗约束的UAV轨迹和RIS波束赋形矩阵优化问题；基于深度强化学习算法，获取最优UAV轨迹和最优RIS波束赋形矩阵，在满足用户最低目标数据速率和UAV能量消耗约束下实现系统容量最大化。本发明在解决轨迹和相移问题的同时，可在能耗约束下，实现系统容量最大化。