公开(公告)号：CN119342587B

公开(公告)日：2025-04-29

申请号：CN202411875496.7

申请日：2024-12-19

Applicant: 北京邮电大学

Inventor： 肖蔼玲 ,  吴胜 ,  陈宁 ,  李聪 ,  潘维民

IPC: H04W72/044 ,  H04W72/0446 ,  H04W72/0457 ,  H04W72/50 ,  H04W72/541 ,  H04W72/52 ,  H04B7/185 ,  G06N3/092

Abstract: 本发明提供了一种波束资源管理方法、装置和电子设备，涉及卫星通信的技术领域，该方法将目标卫星星座所服务的小区集合在当前时隙的数据流量矩阵作为目标多智能体深度强化学习模型中每个智能体的状态，以使每个智能体在预设约束条件下，根据状态输出当前时隙其对应波束的照射方向或带宽分配策略，进而将当前时隙下所有波束的照射方向和带宽分配策略作为目标卫星星座的波束资源管理策略。一个波束对应模型中的一对智能体，分别用于波束的照射方向和带宽分配策略，并且，所有智能体的全局奖励与目标卫星星座的总吞吐量正相关，与总时延差、总负载差和波束干扰强度负相关。因此，该方法能够有效地提升系统性能和信号质量。

公开(公告)号：CN119342587A

公开(公告)日：2025-01-21

申请号：CN202411875496.7

申请日：2024-12-19

Applicant: 北京邮电大学

Inventor： 肖蔼玲 ,  吴胜 ,  陈宁 ,  李聪 ,  潘维民

IPC: H04W72/044 ,  H04W72/0446 ,  H04W72/0457 ,  H04W72/50 ,  H04W72/541 ,  H04W72/52 ,  H04B7/185 ,  G06N3/092

Abstract: 本发明提供了一种波束资源管理方法、装置和电子设备，涉及卫星通信的技术领域，该方法将目标卫星星座所服务的小区集合在当前时隙的数据流量矩阵作为目标多智能体深度强化学习模型中每个智能体的状态，以使每个智能体在预设约束条件下，根据状态输出当前时隙其对应波束的照射方向或带宽分配策略，进而将当前时隙下所有波束的照射方向和带宽分配策略作为目标卫星星座的波束资源管理策略。一个波束对应模型中的一对智能体，分别用于波束的照射方向和带宽分配策略，并且，所有智能体的全局奖励与目标卫星星座的总吞吐量正相关，与总时延差、总负载差和波束干扰强度负相关。因此，该方法能够有效地提升系统性能和信号质量。

公开(公告)号：CN117833987A

公开(公告)日：2024-04-05

申请号：CN202311864798.X

申请日：2023-12-29

Applicant: 北京邮电大学

Inventor： 肖蔼玲 ,  陈宁 ,  吴胜 ,  潘维民

IPC: H04B7/185 ,  H04W72/0446 ,  H04W72/0453 ,  H04W72/0457 ,  H04W72/044 ,  H04W72/512 ,  H04W72/543 ,  H04W84/06 ,  G06N3/092

Abstract: 一种基于多智能体深度强化学习的地球同步轨道卫星动态波束调度方法涉及卫星通信领域。其中每个智能体负责一个激活波束的照亮模式和带宽资源分配模式的优化。结合深度强化学习算法与地面用户环境的高效交互，充分地利用了波束的空间、时间、频率三方面自由度，动态地进行波束覆盖和资源调度，可以将有限的GEO星上资源与地理分布不均匀性和时变性的地面流量需求互相适配。此外，所提出的GEO卫星动态波束调度方法考虑了地面小区的时延公平性，使得本发明更好地确保了地面用户的服务质量。进而，经过联合优化后，可以将本发明离线部署于GEO卫星以实现波束的动态和高效调度。