一种基于后决策状态深度强化学习的任务卸载方法

    公开(公告)号:CN115016858A

    公开(公告)日:2022-09-06

    申请号:CN202210572305.4

    申请日:2022-05-24

    Applicant: 武汉大学

    Abstract: 本发明公开了一种基于后决策状态深度强化学习的任务卸载方法,可以对卸载动作的各个维度进行决策,如任务的卸载对象、卸载数量等。面向不同的优化目标,通过改变成本函数,可以实现不同的目标下的最优策略。本发明利用了DQN的经验回放机制,随机选取收集的历史经验作为训练样本提高学习效率。同时,也利用了后决策状态学习框架和额外的热启动过程加快学习速度。传统的后决策学习框架虽然有较高的学习效率,但需要额外的先验信息。本发明提出了一种基于后决策状态深度强化学习的任务卸载方法,利用一个额外的学习过程来获取传统后决策学习中需要的额外信息,通过利用高效的后决策状态学习框架,热启动过程及经验回放机制实现了卸载方法的快速收敛。

    一种基于后决策状态深度强化学习的任务卸载方法

    公开(公告)号:CN115016858B

    公开(公告)日:2024-03-29

    申请号:CN202210572305.4

    申请日:2022-05-24

    Applicant: 武汉大学

    Abstract: 本发明公开了一种基于后决策状态深度强化学习的任务卸载方法,可以对卸载动作的各个维度进行决策,如任务的卸载对象、卸载数量等。面向不同的优化目标,通过改变成本函数,可以实现不同的目标下的最优策略。本发明利用了DQN的经验回放机制,随机选取收集的历史经验作为训练样本提高学习效率。同时,也利用了后决策状态学习框架和额外的热启动过程加快学习速度。传统的后决策学习框架虽然有较高的学习效率,但需要额外的先验信息。本发明提出了一种基于后决策状态深度强化学习的任务卸载方法,利用一个额外的学习过程来获取传统后决策学习中需要的额外信息,通过利用高效的后决策状态学习框架,热启动过程及经验回放机制实现了卸载方法的快速收敛。

    一种基于爆破振动测试的现场快速测定毫秒雷管延时精度的方法

    公开(公告)号:CN104236404B

    公开(公告)日:2016-03-02

    申请号:CN201410471008.6

    申请日:2014-09-16

    Applicant: 武汉大学

    Abstract: 本发明公开了一种基于爆破振动测试的现场快速测定毫秒雷管延时精度的方法,包括如下步骤:⑴布置炮孔;⑵钻孔、装药完成以后,用导爆索将所有炮孔内的雷管同时点燃同时起爆;⑶接收爆炸传来的爆轰波,并记录波形数据;⑷利用小波分析方法将实测波形按从低到高不同的频段进行分解,并求得低频段波形的时能密度曲线,以获得每一段爆破振动到达的精确时间,扣除爆炸应力波在岩石中传播所用时间,得到雷管的精确延期时间。其优点在于:在一个起爆网络中同时布置多个段号的雷管,可同时测得每个雷管的延期时间。在爆破施工现场中易于应用,能够实时动态地检验毫秒雷管的精度,根据试验场地的不同地形,可灵活布置起爆网络。

    一种基于爆破声压测试的现场雷管延时精度测试方法

    公开(公告)号:CN104197795B

    公开(公告)日:2016-08-17

    申请号:CN201410471316.9

    申请日:2014-09-16

    Applicant: 武汉大学

    Abstract: 本发明公开了一种基于爆破声压测试的现场雷管延时精度测试方法,将雷管按串联或并联的方式布置在一个圆周上,并在圆心处不同高度布置多台声压传感器,起爆后获得各雷管爆破激发的空气冲击波压力曲线或声压曲线;再利用适合非平稳信号分析的小波分析方法对实测波形进行分析,并求得波形的时能密度曲线,以获得每一段声波到达的精确时间,扣除声波在空气中传播所用时间,得到雷管的精确延期时间。其优点是:在一个起爆网络中同时布置多个段号的雷管,可同时测得每个雷管的延期时间。操作简单,效率高,而且分析结果可靠,成本低廉。在爆破施工现场中易于应用,能够实时动态地检验毫秒雷管的精度,根据试验场地的不同地形,可灵活布置起爆网络。

    一种基于爆破声压测试的现场雷管延时精度测试方法

    公开(公告)号:CN104197795A

    公开(公告)日:2014-12-10

    申请号:CN201410471316.9

    申请日:2014-09-16

    Applicant: 武汉大学

    Abstract: 本发明公开了一种基于爆破声压测试的现场雷管延时精度测试方法,将雷管按串联或并联的方式布置在一个圆周上,并在圆心处不同高度布置多台声压传感器,起爆后获得各雷管爆破激发的空气冲击波压力曲线或声压曲线;再利用适合非平稳信号分析的小波分析方法对实测波形进行分析,并求得波形的时能密度曲线,以获得每一段声波到达的精确时间,扣除声波在空气中传播所用时间,得到雷管的精确延期时间。其优点是:在一个起爆网络中同时布置多个段号的雷管,可同时测得每个雷管的延期时间。操作简单,效率高,而且分析结果可靠,成本低廉。在爆破施工现场中易于应用,能够实时动态地检验毫秒雷管的精度,根据试验场地的不同地形,可灵活布置起爆网络。

    一种数据存储系统中数据存在性和完整性校验方法及系统

    公开(公告)号:CN112699123A

    公开(公告)日:2021-04-23

    申请号:CN202011603598.5

    申请日:2020-12-30

    Applicant: 武汉大学

    Abstract: 本发明公开了一种数据存储系统中数据存在性和完整性校验方法及系统,包括快速归纳和校验块数据的存在性和完整性的默克尔树结构,基于此验证结构,可以实现无块验证。此验证结构的使用方法主要包括创建、证明和验证三个部分,创建方法基于哈希运算,得到一个称为无块默克尔树的验证结构及其元数据;证明方法基于挑战信息、验证结构和文件,生成证据;验证方法基于挑战信息、证据和元数据,生成证据是否有效的决策。本发明适用于大规模数据存储系统下的数据完整性校验,以及以太坊区块数据的存储和交易验证,无块默克尔树的验证结构极大的减小了验证过程中的计算和存储开销,且为指定数据块的检验提供了一种轻量级的无块验证方法。

    一种基于爆破振动测试的现场快速测定毫秒雷管延时精度的方法

    公开(公告)号:CN104236404A

    公开(公告)日:2014-12-24

    申请号:CN201410471008.6

    申请日:2014-09-16

    Applicant: 武汉大学

    Abstract: 本发明公开了一种基于爆破振动测试的现场快速测定毫秒雷管延时精度的方法,包括如下步骤:⑴布置炮孔;⑵钻孔、装药完成以后,用导爆索将所有炮孔内的雷管同时点燃同时起爆;⑶接收爆炸传来的爆轰波,并记录波形数据;⑷利用小波分析方法将实测波形按从低到高不同的频段进行分解,并求得低频段波形的时能密度曲线,以获得每一段爆破振动到达的精确时间,扣除爆炸应力波在岩石中传播所用时间,得到雷管的精确延期时间。其优点在于:在一个起爆网络中同时布置多个段号的雷管,可同时测得每个雷管的延期时间。在爆破施工现场中易于应用,能够实时动态地检验毫秒雷管的精度,根据试验场地的不同地形,可灵活布置起爆网络。

Patent Agency Ranking