一种基于多智能体强化学习的多波束干扰规避方法及系统

    公开(公告)号:CN119233427A

    公开(公告)日:2024-12-31

    申请号:CN202411235093.6

    申请日:2024-09-04

    Abstract: 本发明涉及基于多智能体强化学习的多波束干扰规避方法及系统,方法包括:S1、根据卫星生成的多波束及地面小区关系建立初始系统模型图;S2、多波束间干扰分析;S3、根据地面状态信息生成业务到达模型;S4、构建M/G/1排队模型,将S3模型输出结果输入排队模型中;S5、多波束的上下文学习;S6、将波束干扰规避问题转化为多智能体深度确定性策略梯度算法学习问题,并进行马尔可夫决策过程问题的转化定义;S7、根据问题的转化定义和MADDPG算法,进行MADDPG算法的强化学习,依据卫星多个波束输出的最大概率动作值规划卫星波束调度的最优策略。本发明解决了现有低轨卫星多波束系统中多波束之间存在干扰的问题,更加合理、灵活,且能有效规避干扰,提升系统总体性能。

    一种基于吸引子选择模型的多波束干扰规避方法及系统

    公开(公告)号:CN119109488A

    公开(公告)日:2024-12-10

    申请号:CN202411183050.8

    申请日:2024-08-27

    Abstract: 本发明涉及一种基于吸引子选择模型的多波束干扰规避方法及系统,方法包括:S1、建立多波束与地面小区之间覆盖关系的系统模型;S2、构建业务到达模型;S3、根据小区内数据量特征,建立排队论模型;S4、多波束间干扰分析;S5、将多波束干扰规避问题转换为吸引子选择模型的算法问题;S6、构建基于吸引子选择模型的波束干扰规避模型;S7、波束控制。本发明解决了低轨卫星多波束之间产生干扰导致整体性能降低,波束传输受扰的问题,更加合理、灵活,且能有效优化系统的吞吐量、时延,提升系统总体性能。

Patent Agency Ranking