基于强化学习的多路径传输协议拥塞控制方法

    公开(公告)号:CN107171842B

    公开(公告)日:2020-01-03

    申请号:CN201710366309.6

    申请日:2017-05-22

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于强化学习的多路径传输协议拥塞控制方法,通过建立马尔可夫决策过程,将拥塞控制形式化表示。用发送端的各个子流的拥塞窗口大小以及各个子流的RTT来表示各个子流当前的网络状态,定义发送端调整拥塞窗口和发送间隔的动作,建立目标方程,以获得最大平均吞吐量和最小平均时延为目的。通过建立网络模型,模拟产生多种网络环境。在不同的网络环境中,通过不断地试错,对当前网络环境做所有的动作,然后从环境给出的反馈中学习并优化动作。经过大量的线下学习,使得发送端可以在某一个状态区域做出相应的调整拥塞窗口大小和发送间隔的动作,以使得目标方程的值最大。

    基于强化学习的多路径传输协议拥塞控制方法

    公开(公告)号:CN107171842A

    公开(公告)日:2017-09-15

    申请号:CN201710366309.6

    申请日:2017-05-22

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于强化学习的多路径传输协议拥塞控制方法,通过建立马尔可夫决策过程,将拥塞控制形式化表示。用发送端的各个子流的拥塞窗口大小以及各个子流的RTT来表示各个子流当前的网络状态,定义发送端调整拥塞窗口和发送间隔的动作,建立目标方程,以获得最大平均吞吐量和最小平均时延为目的。通过建立网络模型,模拟产生多种网络环境。在不同的网络环境中,通过不断地试错,对当前网络环境做所有的动作,然后从环境给出的反馈中学习并优化动作。经过大量的线下学习,使得发送端可以在某一个状态区域做出相应的调整拥塞窗口大小和发送间隔的动作,以使得目标方程的值最大。

    一种基于VANET的十字路口违章车辆检测方法

    公开(公告)号:CN102467820B

    公开(公告)日:2013-11-27

    申请号:CN201010530886.2

    申请日:2010-11-04

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于移动车载网的十字路口违章车辆检测方法,位于十字路口区域的所有车辆构成一个车载自组网,在嫌疑车辆出现前所有等待绿灯的车辆均为监视车辆,该检测方法步骤为:根据车载自组网中表现的不同特征确认嫌疑车辆,监视车辆向基站发送嫌疑车辆报告,再由基站进行违章界定。本发明将车载自组网络应用到闯红灯车辆的检测中去,根据车载自组网络中闯红灯的车辆与其他车辆之间的通信特征,实现对闯红灯车辆的自动检测,降低了人力监控成本,可以作为交通违章检测的辅助系统。

    电力系统安自装置动作方案生成方法、装置、设备及存储介质

    公开(公告)号:CN119448216A

    公开(公告)日:2025-02-14

    申请号:CN202411452042.9

    申请日:2024-10-17

    Abstract: 本发明公开了一种电力系统安自装置动作方案生成方法、装置、设备及存储介质。方法包括:基于电力系统的各类参与设备的关键属性,构建设备属性向量,并通过设备表示网络转化为设备表示向量;基于设备表示向量,经过聚合、拼接、多层感知机处理构建故障表示向量;根据电力系统设备网络的拓扑结构,构建设备拓扑图,并添加孤立的故障节点,使用设备表示向量和故障表示向量作为节点属性;通过多层消息传播网络、链接预测网络预测故障节点同设备节点的链接关系,并把链接关系转化为故障发生后的安自装置动作方案。本发明从历史数据中学习挖掘故障与设备的隐含关联,生成安自装置动作方案,从而实现大规模电力系统安自装置动作方案的智能化、快速化。

    一种考虑多用户移动性的服务部署和资源分配方法

    公开(公告)号:CN112148492B

    公开(公告)日:2023-07-28

    申请号:CN202011038113.2

    申请日:2020-09-28

    Applicant: 南京大学

    Abstract: 本发明提出了一种考虑多用户移动性的服务部署和资源分配方法,应用于边缘计算网络场景下。所述方法根据边缘计算场景进行建模,将其视为一个综合了服务计算时延开销、传输时延开销和服务迁移开销的最优化问题,并结合决策约束,通过对优化问题进行求解,得到多用户的服务部署和计算资源分配方案。本发明填补了领域空白,支持多用户服务部署,同时考虑了用户的移动性,具有广泛的适用性,提高边缘计算场景下任务分配和执行效率,从而提高网络整体处理性能。

    基于个性化联邦强化学习的流媒体比特率自适应调整方法

    公开(公告)号:CN116320620A

    公开(公告)日:2023-06-23

    申请号:CN202310349691.5

    申请日:2023-04-04

    Applicant: 南京大学

    Abstract: 本发明公开了一种基于个性化联邦强化学习的流媒体比特率自适应调整方法,在基于HTTP的动态自适应流系统中,基于个性化联邦学习和深度强化学习,通过建立马尔可夫决策过程,将比特率自适应过程形式化表示。用户在本地使用强化学习来学习比特率自适应策略。目标方程以最大化用户的体验质量为目的。使用联邦学习协调用户和中央服务器来训练全局模型,并为每个用户使用本地数据在全局模型的基础上训练个性化模型。经过大量的训练,用户可以使用个性化模型来选择比特率从而实现在当前网络条件下目标方程的值最大。本发明在保护隐私不泄露的同时解决了网络环境和用户行为的重尾特性。

Patent Agency Ranking