-
公开(公告)号:CN113742065A
公开(公告)日:2021-12-03
申请号:CN202110904681.4
申请日:2021-08-07
Applicant: 中国航空工业集团公司沈阳飞机设计研究所 , 沈阳飞机设计研究所扬州协同创新研究院有限公司
Abstract: 本申请涉及机器学习技术领域,具体涉及一种基于kubernetes容器集群的分布式强化学习方法及装置。该方法包括:步骤S1、将采样任务以容器的形式运行在第一Kubernetes集群中,所述采样任务用于在机器学习的网络参数中进行采样;步骤S2、将训练任务以容器的形式运行在第二Kubernetes集群中,所述训练任务用于根据采样的数据进行机器学习,形成网络参数。本申请能够大幅提升实验效率及节约成本,仅需要一条命令一键更新容器镜像,集群就会自动滚动更新,从小时级别缩短到分钟级别。
-
公开(公告)号:CN113743583B
公开(公告)日:2024-02-02
申请号:CN202110904687.1
申请日:2021-08-07
Applicant: 中国航空工业集团公司沈阳飞机设计研究所 , 沈阳飞机设计研究所扬州协同创新研究院有限公司
IPC: G06N3/0499 , G06N3/092 , G05D1/24
Abstract: 本申请涉及机器学习技术领域,具体涉及一种基于强化学习的智能体无效行为切换抑制方法。该方法包括:步骤S1、在记忆库中采样一个batch的样本数据;步骤S2、更新强化学习模型的内层模型策略网络与价值网络;步骤S3、固定内层网络参数,更新外层模型策略网络与价值网络,其中,引入智能体无效行为切换算子,并在外层模型相对于内层模型执行无效行为时,降低其价值网络的奖励;步骤S4、以外层模型策略网络的强化学习策略作为智能体实时交互策略并采集数据,更新所述记忆库的交互数据;步骤S5、重复上述步骤,直至模型收敛。本申请在不引入额外人工标注的条件下有效降低智能体的频繁动作切换,不影响模型收敛性能,并提升强化学习模型的鲁棒性与实用性。
-
公开(公告)号:CN113743583A
公开(公告)日:2021-12-03
申请号:CN202110904687.1
申请日:2021-08-07
Applicant: 中国航空工业集团公司沈阳飞机设计研究所 , 沈阳飞机设计研究所扬州协同创新研究院有限公司
Abstract: 本申请涉及机器学习技术领域,具体涉及一种基于强化学习的智能体无效行为切换抑制方法。该方法包括:步骤S1、在记忆库中采样一个batch的样本数据;步骤S2、更新强化学习模型的内层模型策略网络与价值网络;步骤S3、固定内层网络参数,更新外层模型策略网络与价值网络,其中,引入智能体无效行为切换算子,并在外层模型相对于内层模型执行无效行为时,降低其价值网络的奖励;步骤S4、以外层模型策略网络的强化学习策略作为智能体实时交互策略并采集数据,更新所述记忆库的交互数据;步骤S5、重复上述步骤,直至模型收敛。本申请在不引入额外人工标注的条件下有效降低智能体的频繁动作切换,不影响模型收敛性能,并提升强化学习模型的鲁棒性与实用性。
-
公开(公告)号:CN115407700B
公开(公告)日:2024-08-23
申请号:CN202211140119.X
申请日:2022-09-20
Applicant: 沈阳飞机设计研究所扬州协同创新研究院有限公司
IPC: G05B19/042
Abstract: 一种基于多传感器融合的导弹安装车对准系统及使用方法,本发明利用了飞机组弹车和挂弹车外形结构;测量及控制装置合理部署在飞机组弹车和挂弹车车体外壁上;测量装置主要通过相机、激光和雷达进行信息采集;传感器测量装置实时传输采集的信息传送给信息处理模块,采用有线和无线传输相结合的方式;信息处理模块实时处理采集的信息,完成飞机和弹舱目标识别与距离测定信息,解算控制车体运动所需的位姿信息,并实时传输给运动控制模块,完成导弹的自动挂载和拆装。本发明可操作性强、使用方便、系统设计简单、具有智能化、操作安全等特点。
-
公开(公告)号:CN113660064B
公开(公告)日:2023-06-16
申请号:CN202111078861.8
申请日:2021-09-15
Applicant: 沈阳飞机设计研究所扬州协同创新研究院有限公司
Abstract: 本发明提供一种适用于电力线通信系统的基于多数据包的联合二维交织编码方法,属于电力线通信领域。本发明电力线通信系统包括发送端、信道与接收端。在发送端,原始通信数据被划分为多个长度相等的数据包,然后对多个数据包的相同位置数据进行汉明码编码,称为纵向交织汉明码;接下来对包括由汉明码奇偶校验位序列在内的多个数据包分别进行卷积码编码,称为横向卷积码;最终多个数据包依次通过电力线通信信道;在接收端,首先将接收数据以相同的方式划分为多个数据包,并分别以与发送端相对应的过程设计译码方案,恢复电力线通信系统内的通信数据。当电力线通信系统内存在较强的连续突发脉冲干扰时,本发明可以获得良好的误比特率性能。
-
公开(公告)号:CN115469321A
公开(公告)日:2022-12-13
申请号:CN202211140123.6
申请日:2022-09-20
Applicant: 沈阳飞机设计研究所扬州协同创新研究院有限公司
Abstract: 本发明属于机器人技术领域,提出了一种异构信息融合的飞机自动挂弹状态测量方法。测量装置合理布置在飞机组弹车、挂弹车外侧空间,将实时传输采集的信息送给信息处理系统;信息处理系统实时处理采集的信息,完成目标识别与距离测定信息,解算所需相对位姿信息,并实时传输给控制系统,指导完成自动挂弹。本发明设计简单、操作性强、使用方便、智能化等特点。
-
公开(公告)号:CN115456090A
公开(公告)日:2022-12-09
申请号:CN202211140085.4
申请日:2022-09-20
Applicant: 沈阳飞机设计研究所扬州协同创新研究院有限公司
Abstract: 一种基于知识推理机的战斗机多层次复合意图预测方法,用于解决现有技术对战斗机作战意图预测精度低、预测维度单一的技术问题。实现步骤为:首先采集多源传感器数据,预处理样本数据;然后融合样本数据,并抽取数据信息中的实体、关系、属性,构建包含威胁要素、优势要素、攻击指数在内的数据结构化知识;利用专家知识库获取敌机机动动作类型,综合战场态势指标,进行知识推理,获得包含单机意图、协同意图、作战任务意图在内的多层次复合意图预测结果。本发明充分结合了战斗机身份信息、位置信息、行为信息等知识,采用多源数据融合、多层次意图复合的关联建模方法,提高了战斗机意图预测的准确性。
-
公开(公告)号:CN114358247A
公开(公告)日:2022-04-15
申请号:CN202111625582.9
申请日:2021-12-28
Applicant: 沈阳飞机设计研究所扬州协同创新研究院有限公司
Abstract: 本发明公开一种基于因果关系推断的智能体行为解释方法,属辅助决策、因果推断技术领域。通过对采用强化学习进行训练的智能体进行训练数据采集,数据包含智能体训练过程中的环境状态、采取的动作和奖励信息;将数据通过因果关系发现、数据回归拟合的方法进行离线训练,输出合理的行为因果关系模型;利用行为因果关系模型对智能体行为进行在线解释。本发明可以达到很好的行为解释效果。
-
公开(公告)号:CN114358247B
公开(公告)日:2024-11-19
申请号:CN202111625582.9
申请日:2021-12-28
Applicant: 沈阳飞机设计研究所扬州协同创新研究院有限公司
IPC: G06N3/0499 , G06N3/048 , G06N20/00 , G05D1/49 , G05D1/46
Abstract: 本发明公开一种基于因果关系推断的智能体行为解释方法,属辅助决策、因果推断技术领域。通过对采用强化学习进行训练的智能体进行训练数据采集,数据包含智能体训练过程中的环境状态、采取的动作和奖励信息;将数据通过因果关系发现、数据回归拟合的方法进行离线训练,输出合理的行为因果关系模型;利用行为因果关系模型对智能体行为进行在线解释。本发明可以达到很好的行为解释效果。
-
公开(公告)号:CN116506478A
公开(公告)日:2023-07-28
申请号:CN202310473312.3
申请日:2023-04-27
Applicant: 沈阳飞机设计研究所扬州协同创新研究院有限公司
IPC: H04L67/125 , B64F5/60 , G01R31/00 , H04L69/08 , H04Q9/00
Abstract: 本发明公开了一种面向数据接口协议的无人机通用检测装置和使用方法,所述装置包括核心处理系统,网络交换机,以及多个相互独立、可扩展的接口处理系统。所述核心处理系统通过网络交换机与多个接口处理系统进行通讯,控制多个所述接口处理系统采集的数据进行解析处理和指令控制;所述多个接口处理系统分别包括单元控制板卡和接口板卡,单元控制板卡通过串口于相应接口板卡进行通讯,实现接口数据的实时采集和输出。本发明通过相互独立、可扩展的接口处理系统以及基于接口控制文件的核心处理系统通用数据处理方法实现针对多型无人机多种类型接口的数据解析和指令控制。本发明从整体上具有可操作性、使用方便、系统设计简单、通用化、综合化等特点。
-
-
-
-
-
-
-
-
-