一种基于CNN-PPO的兵棋推演智能体构建方法

    公开(公告)号:CN114722998A

    公开(公告)日:2022-07-08

    申请号:CN202210232129.X

    申请日:2022-03-09

    Applicant: 三峡大学

    Inventor: 张震 臧兆祥

    Abstract: 本发明公开了一种基于CNN‑PPO的兵棋推演智能体构建方法,包括:采集兵棋推演平台的初始态势数据,并对初始态势数据进行预处理,获得目标态势数据;构建影响力地图模块,将目标态势数据输入影响力地图模块,输出获得影响力特征;基于卷积神经网络和近端策略优化构建混合神经网络模型,将目标态势数据和影响力特征拼接后,输入混合神经网络模型进行模型迭代训练,直到目标函数最小、网络收敛,实现CNN‑PPO智能体的构建。本发明增加了智能体对态势的理解程度,在一定程度上增加了智能体对战的强度。

    一种基于CNN-PPO的兵棋推演智能体构建方法

    公开(公告)号:CN114722998B

    公开(公告)日:2024-02-02

    申请号:CN202210232129.X

    申请日:2022-03-09

    Applicant: 三峡大学

    Inventor: 张震 臧兆祥

    Abstract: 本发明公开了一种基于CNN‑PPO的兵棋推演智能体构建方法,包括:采集兵棋推演平台的初始态势数据,并对初始态势数据进行预处理,获得目标态势数据;构建影响力地图模块,将目标态势数据输入影响力地图模块,输出获得影响力特征;基于卷积神经网络和近端策略优化构建混合神经网络模型,将目标态势数据和影响力特征拼接后,输入混合神经网络模型进行模型迭代训练,直到目标函数最小、网络收敛,实现CNN‑PPO智能体的构建。本发明增加了智能体对态势的理解程度,在一定程度上增加了智能体对战的强度。

    一种基于双经验池DDPG网络的兵棋推演智能决策方法

    公开(公告)号:CN114611669B

    公开(公告)日:2023-10-13

    申请号:CN202210244709.0

    申请日:2022-03-14

    Applicant: 三峡大学

    Inventor: 张震 臧兆祥

    Abstract: 本发明公开了一种基于双经验池DDPG网络的兵棋推演智能决策方法,包括:获取兵棋推演数据,构建双经验池DDPG模型;对兵棋推演数据进行预处理,将预处理后的数据向量化,获得向量化数据;将向量化数据输入双经验池DDPG模型进行训练,双经验池DDPG模型达到预设收敛程度时完成训练,基于训练完成的双经验池DDPG模型生成兵棋推演智能决策。本发明相较于一般的强化学习架构,收敛速度更快,节省了训练时间,更快地学习到了整体策略。将双经验池DDPG结构应用于兵棋推演中,利用双经验池对训练速度的提升,更快地训练出可用的神经网络模型。通过对高质量样本的筛选和利用,在一定程度上改善了模型表现依赖于样本质量的问题。

    一种基于双经验池DDPG网络的兵棋推演智能决策方法

    公开(公告)号:CN114611669A

    公开(公告)日:2022-06-10

    申请号:CN202210244709.0

    申请日:2022-03-14

    Applicant: 三峡大学

    Inventor: 张震 臧兆祥

    Abstract: 本发明公开了一种基于双经验池DDPG网络的兵棋推演智能决策方法,包括:获取兵棋推演数据,构建双经验池DDPG模型;对兵棋推演数据进行预处理,将预处理后的数据向量化,获得向量化数据;将向量化数据输入双经验池DDPG模型进行训练,双经验池DDPG模型达到预设收敛程度时完成训练,基于训练完成的双经验池DDPG模型生成兵棋推演智能决策。本发明相较于一般的强化学习架构,收敛速度更快,节省了训练时间,更快地学习到了整体策略。将双经验池DDPG结构应用于兵棋推演中,利用双经验池对训练速度的提升,更快地训练出可用的神经网络模型。通过对高质量样本的筛选和利用,在一定程度上改善了模型表现依赖于样本质量的问题。

    一种应用于光伏屋顶的中央空调温度智能调节装置

    公开(公告)号:CN206739535U

    公开(公告)日:2017-12-12

    申请号:CN201720521842.0

    申请日:2017-05-11

    Applicant: 三峡大学

    CPC classification number: Y02B10/14 Y02E10/566

    Abstract: 一种应用于光伏屋顶的中央空调温度智能调节装置,它包括第一控制器,光伏板以及蓄电池接入第一控制器,第一控制器输出端接入逆变器,逆变器接入空调机组,空调机组包括风管,风管上设有电动阀门,光伏板以及蓄电池的数据端接入温度智能调节装置,温度智能调节装置包括第二控制器,与第二控制器输入端分别连接的电量数据采集模块、光照度数据采集模块以及温度数据采集模块。本实用新型的目的在于提供一种应用于光伏屋顶的中央空调温度智能调节装置,旨在解决独立光伏发电中央空调系统光照强度、电池储能综合最优利用的温度智能调节的问题,对中央空调室内温控范围实施自动分级管理。既节约能源、保护环境,又实现了舒适温度下光伏发电的充分利用、电池储能电量的高效利用。

    一种电路拆卸维修用便携式电线收线架

    公开(公告)号:CN211998289U

    公开(公告)日:2020-11-24

    申请号:CN201820869743.6

    申请日:2018-06-05

    Applicant: 三峡大学

    Inventor: 张震

    Abstract: 本实用新型公开了一种电路拆卸维修用便携式电线收线架,包括盘线圈、轴承、把手、锯齿条和伺服电机,所述盘线圈的一侧设置有电动伸缩杆,且电动伸缩杆的一端安装有卡块,所述卡块的一侧设置有磁铁,且磁铁安装在盘线圈的内部,所述轴承嵌合在盘线圈的内部一侧,且轴承的一侧设置有电机,所述电机的输出端安装有绕线杆,且绕线杆的一端设置有延伸杆,所述把手安装在绕线杆的一侧杆壁上。该电路拆卸维修用便携式电线收线架设置有可以拉动行走的盘线圈,盘线圈的一侧安装有轴承,将盘线圈与电动伸缩杆通过卡块固定后,横向放置盘线圈,拉动把手即可带动盘线圈如同轮子一般转动行进,并且在轴承的配合下把手不会随着盘线圈转动,便于人们携带该装置。

    一种基于直流电机控制的烘干房

    公开(公告)号:CN207285082U

    公开(公告)日:2018-05-01

    申请号:CN201720836031.X

    申请日:2017-07-11

    Applicant: 三峡大学

    CPC classification number: Y02A40/924

    Abstract: 一种基于直流电机控制的烘干房,包括烤房及加热装置,所述加热装置包括燃煤热风炉,燃煤热风炉与加热室连通,加热室与烟囱连通,在加热室内设有进风管,进风管的进风口设于加热室外,出风口与循环风机连接,循环风机用于向烤房吹入热风;所述燃煤热风炉的下部还设有助燃风机,所述循环风机及助燃风机均采用直流风机。本实用新型提供一种基于直流电机控制的烘干房,以光伏阵列供电为主。同时,干湿球温湿度传感器经过A/D转换器使数字信号传入主控制器,主控制器进而控制各直流风机模块保证系统安全有效的运行。

    一种屋顶光伏亮化一体化系统

    公开(公告)号:CN206272326U

    公开(公告)日:2017-06-20

    申请号:CN201621317390.6

    申请日:2016-12-03

    Applicant: 三峡大学

    CPC classification number: Y02B10/12 Y02B10/14 Y02B20/72

    Abstract: 一种屋顶光伏亮化一体化系统,包括设于楼顶的太阳能光伏电池板及LED灯组,所述太阳能光伏电池板及LED灯组与双刀双掷继电器连接,双刀双掷继电器与供电母线连接,供电母线与市电、蓄电池及直流负载连接。本实用新型提供一种屋顶光伏亮化一体化系统,能有效的节省蓄电池组和光伏板之间的线路,并且能够自动监测光照强度,来调节双刀双掷开关的闭合方向,能够有效缩短线路,节约电能。

    一种电力设备抬升装置
    9.
    实用新型

    公开(公告)号:CN209291889U

    公开(公告)日:2019-08-23

    申请号:CN201920048087.8

    申请日:2019-01-11

    Applicant: 三峡大学

    Inventor: 张震

    Abstract: 本实用新型公开了一种电力设备抬升装置,包括底架,所述底架的内部安装有传动辊,所述传动辊设置有六个,且六个传动辊等间距水平排列,所述传动辊通过轴承与底架转动连接,且相邻两个传动辊通过皮带转动连接,所述底架的外壁上与传动辊相对应位置处安装有减速器,所述减速器的一端通过转动轴与传动辊转动连接,该抬升装置在传送板上安装有密集的橡胶柱,橡胶柱呈圆台形,在传送板上放置电力设备时,电力设备突出底面上的块和板结构均可以处于相邻橡胶柱的间隙中,而橡胶柱可以托起大部分的电力设备的底面,并通过形变力,产生一定的缓冲,使得放置电力设备时更加的平缓和稳定,避免发生倾斜和碰撞,大大维护了电力设备的使用寿命。

    一种新型多功能带电作业手套

    公开(公告)号:CN207322764U

    公开(公告)日:2018-05-08

    申请号:CN201721186177.0

    申请日:2017-09-15

    Applicant: 三峡大学

    Abstract: 一种新型多功能带电作业手套,包括手套本体,所述手套本体包括外绝缘外层及手套内层,所述手套内层与外绝缘外层之间覆盖有电磁隔离膜;所述手套本体的掌心处设有带拉链的口袋,所述手套本体的手腕处设有扣带用于固定手腕。本实用新型提供一种新型多功能带电作业手套,外绝缘外层采用橡胶材质,起到绝缘人体外部带电体的作用;手套内层上覆盖电磁吸收膜防止外界电磁场干扰。微型互感器及温度传感器将检测到的带电信息及温度信息传递给单片机,然后单片机将信息显示在显示屏上。同时,铺设在电子显示屏5四周的光伏板4能提供电能;带拉链的口袋可以放置小物件,手腕处设有扣带用于固定手腕防止脱落。

Patent Agency Ranking