基于深度强化学习的高速公路道路协同控制系统及方法

    公开(公告)号:CN112289044B

    公开(公告)日:2021-09-07

    申请号:CN202011202148.5

    申请日:2020-11-02

    Inventor: 王翀

    Abstract: 本发明公开了一种基于深度强化学习的高速公路道路协同控制系统及方法,系统包括交通信息交互模块、交通控制模块、深度学习网络训练模块以及若干可变限速和匝道控制单元,通过信息交互模块获取道路的交通状态,再传递给交通控制模块。后者通过训练模块不断优化控制策略,并采用具有actor‑critic架构的深度强化学习算法保证训练过程的稳定性。本发明能同时控制系统中的所有交通控制单元,且不会造成交通状态空间爆炸等问题,能保障车辆以较高速度通过瓶颈路段,且不会因为排队等问题影响周边道路车辆的通行。

    高地协同自动控制方法及系统

    公开(公告)号:CN119541229A

    公开(公告)日:2025-02-28

    申请号:CN202510085663.6

    申请日:2025-01-20

    Abstract: 本发明提供一种高地协同自动控制方法及系统,其中,方法包括以下步骤:响应于接收拥堵排查信号,控制无人机飞行至高速路段进行图像采集;对所述高速采集图像进行图像识别,并确定位于所述高速采集图像中的高速区域以及匝道区域;对所述高速区域进行区域划分,得到分别指示匝道前路段、匝道后路段的第一路段区域以及第二路段区域,获取分别对应匝道前路段、匝道后路段的第一拥堵系数以及第二拥堵系数,并基于第一拥堵系数以及第二拥堵系数确定与所述匝道路段对应的流量属性;响应于流量属性为拥堵属性,获取与所述匝道路段距离最近的车辆灯控设备,并控制所述车辆灯控设备执行对应车辆通行的灯控操作。本发明至少提高交通管理效率。

    融合图卷积神经网络和强化学习的高地协同控制方法

    公开(公告)号:CN119580485A

    公开(公告)日:2025-03-07

    申请号:CN202411687009.4

    申请日:2024-11-22

    Inventor: 梁展 王翀 张韵怡

    Abstract: 本发明提供了一种融合图卷积神经网络和强化学习的高地协同控制方法,通过控制城市道路交通信号灯、高速公路匝道信号机和可变限速单元,缓解高速公路交通拥堵并提升城市交通通行效率,借助信号灯与限速单元控制道路行驶车辆,达到全局路网中的车流调度优化;整体结构采用分布式协同控制框架,由决策智能体控制,根据实时交通情况自主决策与调整,从而增强系统的自适应性和鲁棒性,有效避免了传统集中式控制带来的数据计算量大、处理难、控制策略滞后等缺陷;构建图卷积神经网络模型以聚合周边决策智能体的特征信息,并动态分配控制权重,增强了信息共享能力,防止因缺乏对周边环境的全面感知而导致的次优决策,从而提高整体系统的协同效率。

    一种车联网环境下的城市交通信号协同控制方法及系统

    公开(公告)号:CN117809467A

    公开(公告)日:2024-04-02

    申请号:CN202410002477.7

    申请日:2024-01-02

    Inventor: 王翀

    Abstract: 本发明公开了一种车联网环境下的城市交通信号协同控制方法及系统,该方法首先对城市路网每个子区域的网联车辆,收集网联车辆信息的到交通状态信息;然后对于每个子区域计算参与协作的子区域对当前子区域的协作权重,根据协作权重计算最终交通状态和奖励函数;最后通过强化学习模型优化控制策略,获取最优协作策略,按照最优协作策略指导每个所述子区域的交通信号控制;本发明还公开了一种相关性指标来衡量不同比例网联车辆环境下控制方法的可执行性;本发明实现了对城市交通信号灯的整体协同控制,通过分布式的双层协作框架,显著降低每个交通控制单元需要处理的问题规模,提升城市路网的整体通行效率。

    一种基于多智能体深度强化学习的公交优先交通信号协同控制方法

    公开(公告)号:CN117746654A

    公开(公告)日:2024-03-22

    申请号:CN202311792494.7

    申请日:2023-12-25

    Abstract: 本发明提出了一种基于多智能体深度强化学习的公交优先交通信号协同控制方法,旨在优化城市交通流并提高公交车辆的通行效率。该方法包括以下步骤:首先,通过城市交通监控系统实时收集交通状态数据,包括车辆流量、交通拥堵程度和交通信号灯状态等信息。然后,将这些数据输入到预先训练好的深度Q网络模型中。该模型使用历史交通状态数据训练,能够预测不同交通信号灯控制策略对公交车辆通行效率的影响。根据模型预测的结果,系统自动调整交通信号灯的控制策略,优先保障公交车辆的畅通和准点到站。在此基础上,模型还能够根据实时数据不断学习和调整,以适应交通状况的变化。

    高地协同自动控制方法及系统

    公开(公告)号:CN119541229B

    公开(公告)日:2025-05-09

    申请号:CN202510085663.6

    申请日:2025-01-20

    Abstract: 本发明提供一种高地协同自动控制方法及系统,其中,方法包括以下步骤:响应于接收拥堵排查信号,控制无人机飞行至高速路段进行图像采集;对所述高速采集图像进行图像识别,并确定位于所述高速采集图像中的高速区域以及匝道区域;对所述高速区域进行区域划分,得到分别指示匝道前路段、匝道后路段的第一路段区域以及第二路段区域,获取分别对应匝道前路段、匝道后路段的第一拥堵系数以及第二拥堵系数,并基于第一拥堵系数以及第二拥堵系数确定与所述匝道路段对应的流量属性;响应于流量属性为拥堵属性,获取与所述匝道路段距离最近的车辆灯控设备,并控制所述车辆灯控设备执行对应车辆通行的灯控操作。本发明至少提高交通管理效率。

    基于多智能体深度强化学习的城市交通信号协同控制方法

    公开(公告)号:CN114995119A

    公开(公告)日:2022-09-02

    申请号:CN202210151210.5

    申请日:2022-02-16

    Inventor: 王翀

    Abstract: 本发明公开了基于多智能体深度强化学习的城市交通信号协同控制方法,包括:采集城市路网的交通状态信息向量;协调各个子区域交叉口的控制策略,并生成子区域交叉口的控制策略。通过深度强化学习算法优化交通信号灯配时,实时动态地调节交叉口车流,减少拥堵延误。以降低总旅行时间为目标优化所有交叉口的信号配时,防止单一交叉口优化对路网造成不利影响,并通过强化学习持续更新优化策略。本发明可以满足城市交通信号控制问题的复杂性、实时性、适应性要求,提升城市路网的整体通行效率,缓解交通拥堵。

    基于深度强化学习的高速公路道路协同控制系统及方法

    公开(公告)号:CN112289044A

    公开(公告)日:2021-01-29

    申请号:CN202011202148.5

    申请日:2020-11-02

    Inventor: 王翀

    Abstract: 本发明公开了一种基于深度强化学习的高速公路道路协同控制系统及方法,系统包括交通信息交互模块、交通控制模块、深度学习网络训练模块以及若干可变限速和匝道控制单元,通过信息交互模块获取道路的交通状态,再传递给交通控制模块。后者通过训练模块不断优化控制策略,并采用具有actor‑critic架构的深度强化学习算法保证训练过程的稳定性。本发明能同时控制系统中的所有交通控制单元,且不会造成交通状态空间爆炸等问题,能保障车辆以较高速度通过瓶颈路段,且不会因为排队等问题影响周边道路车辆的通行。

Patent Agency Ranking