基于强化学习的列车运行控制方法、装置、设备及介质

    公开(公告)号:CN117908367A

    公开(公告)日:2024-04-19

    申请号:CN202311658114.0

    申请日:2023-12-05

    Inventor: 李凯 宋亚京 张蕾

    Abstract: 本发明涉及轨道车辆控制技术领域,尤其涉及一种基于强化学习的列车运行控制方法、装置、设备及介质。本发明通过根据列车运行数据,使用强化学习方法求解列车运行模型得到列车运行性能模型,再根据列车运行性能模型得到列车控制参数,可以使列车运行性能模型更符合列车运行的实际情况,更大程度利用列车运行数据中的信息,提高数据样本的使用效率,使得到的列车运行性能模型具有更好的泛化能力,从而实现高准确度的轨道车辆运行控制,提高轨道车辆运行的安全性与可靠性。

    一种多层结构的多车协同控制方法及系统

    公开(公告)号:CN115805977A

    公开(公告)日:2023-03-17

    申请号:CN202211641138.0

    申请日:2022-12-20

    Inventor: 宋亚京 张蕾

    Abstract: 本申请实施例提供一种多层结构的多车协同控制方法,根据线路运营情况,中心层调整列车运行计划,将调度指令发送到协调层;协调层根据调度指令,获取列车实际情况,计算出最佳集群控制方案;集群控制层根据集群控制方案得出集群列车的总体规划曲线;列车控制层则根据总体规划曲线,结合轨旁资源层的状态进行单车的控制与防护,列车按计划运行至指定目标点,中心层下达列车集群解散命令,列车按照单车计划运行。本申请将多车协同动态控制系统分为中心层、协调层、集群控制层、列车控制层、共享数据层和轨旁资源层,每层承载不同的功能,当列车以多车协同模式运行时,作为一个整体去申请轨旁资源,降低了多车协同控制系统的复杂性,提高了运行效率。

    一种城市轨道交通平行推演系统及方法

    公开(公告)号:CN115730872A

    公开(公告)日:2023-03-03

    申请号:CN202211478468.2

    申请日:2022-11-23

    Abstract: 本公开的实施例提供了一种城市轨道交通平行推演系统及方法,其中,所述系统包括:数据接入模块,用于获取城市轨道交通系统所需的轨道交通线网数据;自主学习模块,用于将所述静态数据,所述动态数据和所述调度数据转化为训练样本进行模型训练得到最新模型;模型管理模块,用于提供所述列车模型、所述OD模型和所述路径选择模型的拷贝给平行仿真模块;所述平行仿真模块,用于根据所述静态数据、所述动态数据、所述调度数据、所述列车模型的拷贝、所述OD模型的拷贝和所述路径选择模型的拷贝进行路网仿真,得到仿真结果,通过机器学习方法,构建有自学习能力的城市轨道交通平行推演系统,以辅助优化路网运行。

    一种列车追踪控制方法、设备、存储介质

    公开(公告)号:CN115392111A

    公开(公告)日:2022-11-25

    申请号:CN202210892072.6

    申请日:2022-07-27

    Abstract: 本申请提供一种列车追踪控制方法、设备、存储介质,该方法构建强化学习模型,强化学习模型包括数据预测模型和目标函数;获取当前策略序列,策略序列与动作对应;根据数据预测模型,预测当前策略序列对应的动作在下一时刻的状态;根据下一时刻的状态,生成对应的下一时刻策略序列;根据目标函数,从下一时刻策略序列中选择目标策略序列;基于目标策略序列进行列车追踪控制。本申请的方法基于数据预测模型和目标函数进行列车追踪控制,可以有效解决现有控制算法针对复杂系统精确建模困难、参数整定不易以及动态参数调整等问题。

    轨道列车运行控制系统及方法

    公开(公告)号:CN115384584A

    公开(公告)日:2022-11-25

    申请号:CN202210931007.X

    申请日:2022-08-04

    Abstract: 本申请涉及轨道交通技术领域,具体涉及一种轨道列车运行控制系统及方法,系统包括:云控制端,用于基于第一区间内的运行数据计算并发送第一区间内各轨道列车的第一控制指令;若干边控制端,用于基于第二区间内的运行数据计算并发送第二区间内各轨道列车的第二控制指令;车载端,基于第一控制指令、第二控制指令、第三控制指令及各对应的权重确定运行指令,运行指令用于控制本轨道列车运行。相对于单纯依靠轨道列车自身的计算能力,将轨道列车运行数据部分计算需求分布于边控制端和云控制端,减小车载端(轨道列车)的成本;同时将各数据集中,便于多车系统的数据共享,降低延时和增强轨道列车控制的准确性。

    基于虚拟编组的动态解编方法、装置及系统

    公开(公告)号:CN113734206B

    公开(公告)日:2022-09-02

    申请号:CN202111114243.4

    申请日:2021-09-23

    Inventor: 宋亚京 包峰 张蕾

    Abstract: 本申请实施例提供了基于虚拟编组列车的动态解编方法,装置及系统,涉及轨道交通技术领域。所述方法包括:分别接收道岔状态和道岔实际转动时间,所述道岔实际转动时间是道岔健康监测服务器根据道岔健康状态确定的;若虚拟编组列车中前后车运行方向均与接收到的道岔状态一致,则控制所述前后车在当前道岔区域解编;若虚拟编组列车中前后车运行方向与接收到的道岔状态不一致,则根据所述前后车运行方向与所述道岔状态的匹配关系,以及所述道岔实际转动时间,控制所述前后车在相应的解编区域解编。本申请能够基于道岔实际转动时间确定列车解编位置,从而有效减少占用轨旁资源时间,提升整条线路的列车运行效率。

    基于动态客流的车站限流控制方法及装置

    公开(公告)号:CN114971982A

    公开(公告)日:2022-08-30

    申请号:CN202210531230.5

    申请日:2022-05-16

    Abstract: 本发明提供一种基于动态客流的车站限流控制方法及装置,该方法包括:获取进站和出站客流量及获取每个列车进站上车和下车的客流量,并根据所述进站和出站客流量,以及每个列车进站上车和下车的客流量,确定车站总客流量;根据总客流量与预设的理想客流量,确定客流量偏差;根据上一控制周期的总客流量和客流量偏差,基于状态观测器,确定当前控制周期输入客流量的控制量,对进站闸机进行控制。该方法不受站务人员自身经验、外界条件等不确定因素的影响,同时在总客流量和理想客流量差值较大情况下,可避免直接应用理想客流量进行限制时,致乘客的拥堵,降低用户体验,进行少量控制时,又无法实现有效的限流,无法使得客流量尽快接近理想值的问题。

    轨道交通列车定位方法、装置及系统

    公开(公告)号:CN111762237B

    公开(公告)日:2022-07-19

    申请号:CN202010608595.4

    申请日:2020-06-29

    Inventor: 宋亚京 张春雨

    Abstract: 本发明实施例提供一种轨道交通列车定位方法、装置及系统,所述方法包括:获取光发射模块发射的光信号,以及包含所述光发射模块的图像信息;基于所述光信号和所述图像信息确定轨道交通列车的位置。本发明实施例提供的轨道交通列车定位方法、装置及系统,将光通信和图像处理技术应用到轨道交通列车的定位中,提高了列车定位的精度。

    轨道交通列车定位方法、装置及系统

    公开(公告)号:CN111762236B

    公开(公告)日:2022-05-10

    申请号:CN202010608526.3

    申请日:2020-06-29

    Abstract: 本发明实施例提供一种轨道交通列车定位方法、装置及系统,所述方法包括:分别获取第一光信号、第二光信号和第三光信号;所述第一光信号是由安装在车头的第一光接收模块采集的;所述第二光信号是由安装在车中的第二光接收模块采集的;所述第三光信号是由安装在车尾的第三光接收模块采集的;基于所述第一光信号、所述第二光信号和所述第三光信号确定轨道交通列车的位置。本发明实施例提供的轨道交通列车定位方法、装置及系统,使用光通信的定位方式,不会受到其他通信的频段干扰,信息直线性一对一传输,保密性强,利用三个车载光接收模块进行定位,提高了列车定位的精度。

Patent Agency Ranking