多智能体强化学习的多星协作分布式路由方法

    公开(公告)号:CN119995693A

    公开(公告)日:2025-05-13

    申请号:CN202510451360.1

    申请日:2025-04-11

    Abstract: 本发明提供了一种多智能体强化学习的多星协作分布式路由方法,本发明能够利用时间切片技术构建卫星网络静态拓扑模型,并建立最小化数据包端到端时延的目标函数;基于卫星网络静态拓扑模型构建卫星智能体网络,并获取卫星交互经验数据;其中,卫星智能体网络包括多星协作混合网络和每个智能体对应的卫星决策网络;根据卫星交互经验数据进行卫星智能体网络的训练,得到训练后的卫星智能体网络;将训练后的卫星智能体网络中的卫星决策网络分别部署到相应智能体上,以使智能体基于所部署的卫星决策网络进行路由决策。这样通过卫星决策网络与多星协作混合网络的协同工作,能够实现低轨卫星星座的高效分布式路由决策,降低时延并平衡负载。

    一种卫星路由预测模型的训练方法及低轨卫星路由方法

    公开(公告)号:CN119783554A

    公开(公告)日:2025-04-08

    申请号:CN202510272529.7

    申请日:2025-03-10

    Abstract: 本申请提供了一种卫星路由预测模型的训练方法及低轨卫星路由方法,该方法通过获取每个卫星节点在当前卫星网络环境状态下的观察信息及基于多目标优化模型随机抽取的各目标的权重组合;将各个卫星节点的观察信息及随机抽取的各目标的权重组合输入到各自的卫星路由预测模型中得到多个动作的Q值;将各卫星路由预测模型输出的Q值共同输入到Mixing网络中进行联合训练,基于主联合Q和副联合Q值及预设的损失函数计算损失值基于损失值调整卫星路由预测模型的参数,重复上述训练过程,直至达到预设迭代条件。本发明通过将多目标优化模型的不同路由指标的权重作为观察输入卫星路由预测模型中进行训练,能够生成多样化的,满足不同业务偏好的策略。

    基于多智能体强化学习的卫星网络微服务部署方法及装置

    公开(公告)号:CN117811907A

    公开(公告)日:2024-04-02

    申请号:CN202311360363.1

    申请日:2023-10-19

    Abstract: 本申请实施例提供一种基于多智能体强化学习的卫星网络微服务部署方法及装置,该方法包括:获取微服务的资源需求信息;根据预先建立的资源利用率模型和时延模型,以及卫星节点的配置信息,确定卫星节点的资源利用率信息和时延信息;在资源利用率信息小于第一预设值,或者时延信息小于第二预设值的情况下,采用预先训练好的多智能体策略部署模型,确定与微服务的资源需求信息对应的卫星节点的部署策略,根据卫星节点的部署策略对服务器终端进行配置,可以根据微服务对服务器资源需求,以及各个卫星节点的资源剩余量,对各个卫星节点进行资源配置,提高卫星节点的资源利用均衡度,并且降低调用时延,提高配置效率。

    无线网络多控制器部署和资源分配方法和装置

    公开(公告)号:CN109379747B

    公开(公告)日:2022-04-12

    申请号:CN201811478227.1

    申请日:2018-12-04

    Abstract: 本发明提供了一种无线网络多控制器部署和资源分配方法和装置,涉及网络控制的技术领域,包括:确定目标参数;基于粒子群优化算法,目标无线网络参数,粒子群算法参数,对初始部署位置执行第一预设次数迭代优化,得到每个控制器的最优部署位置;基于每个控制器的最优部署位置和每个控制器的资源分配策略确定目标无线网络的初始状态空间;基于强化学习算法,初始状态空间,状态空间和强化学习算法参数,对初始状态空间执行第二预设次数迭代优化,得到目标无线网络的最优资源分配策略,解决了现有的网络多控制器部署和资源分配方法中,网络处理性能较低的技术问题。

    一种卫星功率管理方法及装置

    公开(公告)号:CN113301636A

    公开(公告)日:2021-08-24

    申请号:CN202110525718.2

    申请日:2021-05-13

    Abstract: 本申请提供一种卫星功率管理方法及装置。方法包括:获取无线通信设备中的目标天线单元欲传输的数据的目标数据容量,目标天线单元为无线通信设备的K个天线单元中的任一天线单元;基于无线通信设备的最大设备传输功率及目标数据容量,通过预设功率优化算法动态确定目标天线单元的目标功率,以供目标天线单元以目标功率生成波束,并通过所生成的波束传输欲传输的数据,如此,有利于目标天线单元基于欲传输的目标数据容量,灵活调节功率,从而有利于提高目标天线单元的能效,降低目标天线单元在传输数据过程中的能耗。

    基于频控阵的物理层安全传输优化方法和装置

    公开(公告)号:CN113067813A

    公开(公告)日:2021-07-02

    申请号:CN202110286945.4

    申请日:2021-03-17

    Abstract: 本申请提供一种基于频控阵的物理层安全传输优化方法、装置、电子设备和存储介质,该方法包括:根据有限字符输入信号和预设信道模型建立安全传输速率优化模型;对安全传输速率优化模型中的预设预编码和预设频率偏移向量进行交替优化,确定优化后的预编码和频率偏移向量,并计算优化后的安全传输速率,进而提高了物理层安全传输系统在实际应用中的安全性。

    一种网络流量配置方法及装置

    公开(公告)号:CN110336754B

    公开(公告)日:2020-04-21

    申请号:CN201910386383.3

    申请日:2019-05-09

    Abstract: 本申请实施例提供了一种网络流量配置方法及装置,通过获取目标自治域的网络参数信息,其中,所述网络参数信息包括网络链路上的链路参数信息以及网络节点上的节点参数信息;基于所述链路参数信息和所述节点参数信息,确定所述目标自治域的第一网络参数矩阵;将所述第一网络参数矩阵输入至预先训练好的卷积神经网络模型中得到第二网络参数矩阵;基于所述第二网络参数矩阵中的边界节点参数信息以及与所述边界节点对应的链路的链路参数信息对与所述目标自治域对应的跨域网络抽象拓扑中的网络链路和网络节点进行网络流量配置,这样,可以简化计算步骤,提高网络配置速度和质量。

    一种空间路由方法及装置

    公开(公告)号:CN108540213A

    公开(公告)日:2018-09-14

    申请号:CN201810810372.9

    申请日:2018-07-20

    Abstract: 本发明提供了一种空间路由方法及装置,涉及卫星网络路由的技术领域,包括接收用户输入的体验公式参数值、路径起始节点和路径目的节点;根据用户输入的体验公式参数值、预设的体验值计算公式、预设的多个时隙的时延路由表和抖动路由表,计算多个时隙中每两个不同路径节点之间的体验质量,并存入与时隙对应的量化值路由表中;在任一时隙的量化值路由表中,确定与路径起始节点和路径目的节点匹配的多条路径及每条所述路径的体验质量的平均值;将多条路径中体验质量的平均值最大的路径确定为最短路径,解决了传统的路由算法无法提供满足用户需求的路由方案技术问题,达到了针对不同的用户需求,提供满足用户需求的最短路径的技术效果。

    一种定位辐射源位置的方法及系统

    公开(公告)号:CN115221923A

    公开(公告)日:2022-10-21

    申请号:CN202210832486.X

    申请日:2022-07-14

    Abstract: 本申请的一些实施例提供了一种定位辐射源位置的方法及系统,该方法包括:接收由设备集群中至少部分设备所发送的多个特征参量值,其中,所述设备集群中的各个设备分别用于接收同一辐射源所发射的信号,所述特征参量值是通过时间差采样信号得到的,所述时间差采样信号是由所述任一设备通过融合自身对所述信号的采样信号以及与所述任一设备的相邻设备对所述信号的采样信号后得到的;根据所述多个特征参量值,构建目标代价函数;根据所述目标代价函数,获取所述辐射源的目标位置。本申请的实施例提供的方法可以实现对辐射源位置的高效精准定位。

    卫星信道分配方法及装置
    10.
    发明公开

    公开(公告)号:CN113271677A

    公开(公告)日:2021-08-17

    申请号:CN202110525719.7

    申请日:2021-05-13

    Abstract: 本发明涉及一种卫星信道分配方法及装置,该方法包括:获取环境中的各个信道在时刻t的环境状态St;根据预先确定出的用于表征环境状态与分配策略之间的映射关系以及环境状态St,确定与环境状态St对应的分配策略At;根据分配策略At为各个信道分配信道资源;环境状态St用于表征各个信道的信道资源在时刻t的分配情况,以及各个信道的信道资源在时刻t的使用情况;分配策略At用于表征在时刻t时,各个信道采取的资源分配动作。在上述过程中,采用动态的方式为各个信道分配信道资源,有利于均衡各个信道的信道资源需求量,进而优化信道资源的利用率,使得信道资源的分配更为合理。

Patent Agency Ranking