基于QMIX的分布式网内拥塞控制方法

    公开(公告)号:CN113315715B

    公开(公告)日:2024-01-05

    申请号:CN202110370309.X

    申请日:2021-04-07

    Abstract: 本发明涉及一种基于QMIX的分布式网内拥塞控制方法,本发明通过直接将相关方法部署在网内的三层交换机中,进行数据包的调度与拥塞控制来克服上述传统技术的缺点,同时进一步提升了拥塞控制效果。本发明受到近年来,多智能体系统控制领域中的分布式强化学习方法的启发,采用多智能体强化学习方法中的集中式训练,分布式执行的算法框架,将QMIX算法直接在交换机内部实现,在快速响应毫秒级流量波动的同时,又做到了各交换机之间的协调控制,从而达到稳定的全局最优系统状态,进行网络拥塞控制。利用日趋成熟的多智能体深度强化学习方法来解决传统网络拥塞问题。(56)对比文件高少华.基于深度强化学习的TCP拥塞控制机制研究.信息科技.2021,(第4期),全文.王亚东;张悦;陈延祥;张宇.命名数据网络中的一种主动拥塞控制机制研究.载人航天.2020,(第01期),全文.肖扬;吴家威;李鉴学;刘军.一种基于深度强化学习的动态路由算法.信息通信技术与政策.2020,(第09期),全文.

    无人集群智能模型训练方法、装置和电子设备

    公开(公告)号:CN115329985B

    公开(公告)日:2023-10-27

    申请号:CN202211087378.0

    申请日:2022-09-07

    Abstract: 本发明提供了一种无人集群智能模型训练方法、装置和电子设备,涉及通信的技术领域,该方法将无人集群的训练划分为簇内集中式联邦学习和簇间分布式联邦学习两个阶段,簇内集中式学习时,簇头作为模型所有者来和簇内节点进行参数传递,并进行模型聚合,从而缓解了传统的集中式联邦学习方式存在的通信拥塞和计算瓶颈的技术问题;并且,簇间分布式学习时,由于只有邻居簇头间进行参数传输和模型聚合,所以与传统分布式联邦学习相比,本发明还能有效地减少通信能耗。

    一种基于流量预测与ONU迁移的无源光网络动态切片方法、装置及存储介质

    公开(公告)号:CN116614734A

    公开(公告)日:2023-08-18

    申请号:CN202310577494.9

    申请日:2023-05-22

    Abstract: 本发明提供一种基于流量预测与ONU迁移的无源光网络动态切片方法、装置及存储介质,所述方法的步骤包括:获取切片中每个ONU的历史流量数据,基于历史流量数据构建输入数据,将所述输入数据输入到预设的预测模型中,输出每个ONU在预测周期对应的输出数据,基于每个ONU的输出数据确定该切片在所述预测周期的预测流量数据;计算当前切片总带宽是否满足预测流量数据;若不满足,则计算其他切片在预测周期的剩余带宽,修改ONU与切片的从属关系,将溢出流量对应的ONU迁移至剩余带宽最大的切片中。本方案通过ONU迁移改变与切片从属关系,提前进行灵活的网络调整,在面对异构网络时避免了成本增加和接入网带宽资源的浪费,能够匹配工业互联网各项设备的需求。

    无人机集群服务功能链动态配置方法和装置

    公开(公告)号:CN116614377A

    公开(公告)日:2023-08-18

    申请号:CN202310890312.3

    申请日:2023-07-20

    Abstract: 本发明提供了一种无人机集群服务功能链动态配置方法和装置,涉及无人机通信技术领域,本发明所使用的目标神经网络模型采用按需协作通信方式进行服务功能链动态部署,对不同队友建立不同队友模型,相比于现有的广播式通信算法或点对点式通信方式,按需通信的方式下,无人机之间传送不同的激励信息,且每个无人机的Q值都要加入其他无人机发送的激励信息,也即,每个无人机在动作选取时都受其余无人机的激励信息影响,并且按需通信还能减少信令的开销,因此,在利用本发明方法对服务功能链进行动态配置时可以加快收敛速度,提高算法收敛性,使无人机集群网络延迟保持在较低水平。

    空天地网络中的计算任务卸载方法、装置和电子设备

    公开(公告)号:CN116489683B

    公开(公告)日:2023-08-18

    申请号:CN202310737201.9

    申请日:2023-06-21

    Abstract: 本发明提供了一种空天地网络中的计算任务卸载方法、装置和电子设备,涉及通信的技术领域,首先将空天地网络中计算任务的多时隙优化问题模型转化为单时隙优化问题模型,然后利用目标神经网络模型按照时间先后依次求解各个时隙的初始计算任务卸载策略,同时不断根据当前时隙的初始计算任务卸载策略和单时隙优化问题模型对目标神经网络模型进行更新,并在确定更新后的目标神经网络模型的网络参数通过区块链认证的情况下,将初始计算任务卸载策略作为当前时隙的目标计算任务卸载策略。利用该方法能够在最大化任务处理比特数目的同时,最小化空中装置的执行成本和隐私保护成本,以缓解现有空天地网络中的计算任务卸载方法存在的网络成本大的技术问题。

    基于可编程数据平面的智能网内负载均衡方法与装置

    公开(公告)号:CN116155819B

    公开(公告)日:2023-07-14

    申请号:CN202310424468.2

    申请日:2023-04-20

    Abstract: 本发明提供了一种基于可编程数据平面的智能网内负载均衡方法与装置,涉及通信的技术领域,该方法应用于控制平面,通过获取网络系统中每个交换机的队列深度来实现全局拥塞感知,并利用强化学习算法确定目标交换机的端口转发概率,以辅助决策目标交换机的数据包转发路径。由于强化学习算法的奖励函数值与网络系统中交换机的队列深度差值和平均队列深度成反比,所以能够达到网络中负载均衡效果越差则奖励越少的目的,进而使得智能体输出的动作向减小拥塞、增强负载均衡效果的方向发展。在不对称的网络拓扑环境中仍具备较佳的负载均衡效果,有效地缓解了现有的负载均衡方法负载均衡效果差和普适性差的技术问题。

    一种适用于短距离高速光纤通信系统的联合编码调制方法

    公开(公告)号:CN116418458A

    公开(公告)日:2023-07-11

    申请号:CN202310480951.2

    申请日:2023-04-28

    Abstract: 本发明提出一种适用于短距离高速光纤通信系统的编码调制方法,包括:步骤1、对输入的信息比特进行分组,分为不做任何操作的长度为kabit的第一信息序列ua,以及将要被整形的长度为ksbit的第二信息序列us;步骤2、采用基于枚举球映射方法的分布匹配器将均匀分布的二进制信息转换为带有目标分布的符号序列,称经过二进制标签后的上述符号序列为整形信息uc;步骤3、将uc作为前向纠错编码模块的输入信息,被进行两次编码,首先基于硬判决的阶梯码,然后基于软判决的汉明码进行编码。该方案将基于枚举球映射的概率整形技术和基于高速短距光互连的前向纠错编码相结合,维持概率分布不变,避免了前向纠错编码对概率分布的破坏。

Patent Agency Ranking