-
公开(公告)号：CN115586869B
公开(公告)日：2023-06-06
申请号：CN202211193073.8
申请日：2022-09-28
Applicant: 中国兵器工业计算机应用技术研究所
IPC: G06F3/06
Abstract: 本发明涉及一种自组网系统及自组网系统的流数据处理方法，属于数据处理技术领域；解决现有技术中的自组网系统硬件存储成本高，且现有的流数据处理方法处理速度慢的问题；本发明的系统包括至少一种数据采集设备、客户端和服务器；其中，至少一种数据采集设备用于采集得到流数据，并通过无线链路向服务器发送写数据请求；客户端用于向服务器发送读数据请求；服务器包括存储器和处理器；处理器用于在接收到写数据请求时将接收到的流数据按照冷数据和热数据在存储器中分别进行存储，并在接收到读数据请求时，按预设的流程读取存储器中存储的数据到客户端；冷数据和热数据通过预设时间内对存储器中存储的数据的读写频率统计得到。
-
公开(公告)号：CN115509721A
公开(公告)日：2022-12-23
申请号：CN202211330158.6
申请日：2022-10-27
Applicant: 中国兵器工业计算机应用技术研究所
IPC: G06F9/48
Abstract: 本发明涉及一种数据处理任务协同控制调度方法及系统，属于数据处理技术领域；解决现有技术中的数据处理任务调度方法无法实现流数据处理任务与批数据处理任务的混合编排，无法满足用户选择流数据或批数据处理任务类型时无感操作的要求；本发明的方法包括以下步骤：获取当前节点的数据处理任务；根据数据处理任务的任务类型及数据处理进度设置相应的数据状态；并根据数据处理任务的执行状态设置相应的任务状态；获取当前节点的一个或多个下游任务，基于下游任务的任务类型，适配下游任务所需的数据结构；基于当前节点的任务状态、数据状态以及当前节点下游任务的任务类型，判断是否开始运行下游任务，以进行数据处理任务的协同控制调度。
-
公开(公告)号：CN115562676B
公开(公告)日：2023-06-06
申请号：CN202211240180.1
申请日：2022-10-11
Applicant: 中国兵器工业计算机应用技术研究所
Inventor： 孟英谦 , 杜宏博 , 彭龙 , 李胜昌 , 梁冬 , 鲁东民 , 葛晋鹏 , 郭亚辉 , 米丽媛 , 饶雷 , 张帅 , 邵鹏志 , 王乃正 , 薛行 , 徐天敕 , 王嘉岩 , 随秋林
Abstract: 本发明提供了一种图计算引擎的触发方法，属于图计算技术领域，解决了现有图计算引擎的编译过程执行效率较差的问题。触发方法包括：接收OpenCypher操作指令；启动Cypher编译器，对OpenCypher操作指令进行语法及语义解译，将解译后的OpenCypher操作命令编译为分布式逻辑执行计划，并根据分布式逻辑执行计划生成在分布式环境下执行的物理执行计划；向GraphMaster进行注册并申请资源；GraphMaster根据物理执行计划获取待执行任务，将待执行任务分解成多个一级任务，并将各一级任务分配给不同的GraphSlave；GraphSlave将接收到的一级任务分解成多个二级任务，并将各二级任务分配给不同的Worker，由Worker执行相应二级任务；所有待执行任务完成后，向GraphMaster申请资源注销，等待接收下一次OpenCypher操作指令。
-
公开(公告)号：CN115509721B
公开(公告)日：2023-05-16
申请号：CN202211330158.6
申请日：2022-10-27
Applicant: 中国兵器工业计算机应用技术研究所
IPC: G06F9/48
Abstract: 本发明涉及一种数据处理任务协同控制调度方法及系统，属于数据处理技术领域；解决现有技术中的数据处理任务调度方法无法实现流数据处理任务与批数据处理任务的混合编排，无法满足用户选择流数据或批数据处理任务类型时无感操作的要求；本发明的方法包括以下步骤：获取当前节点的数据处理任务；根据数据处理任务的任务类型及数据处理进度设置相应的数据状态；并根据数据处理任务的执行状态设置相应的任务状态；获取当前节点的一个或多个下游任务，基于下游任务的任务类型，适配下游任务所需的数据结构；基于当前节点的任务状态、数据状态以及当前节点下游任务的任务类型，判断是否开始运行下游任务，以进行数据处理任务的协同控制调度。
-
公开(公告)号：CN115562676A
公开(公告)日：2023-01-03
申请号：CN202211240180.1
申请日：2022-10-11
Applicant: 中国兵器工业计算机应用技术研究所
Inventor： 孟英谦 , 杜宏博 , 彭龙 , 李胜昌 , 梁冬 , 鲁东民 , 葛晋鹏 , 郭亚辉 , 米丽媛 , 饶雷 , 张帅 , 邵鹏志 , 王乃正 , 薛行 , 徐天敕 , 王嘉岩 , 随秋林
Abstract: 本发明提供了一种图计算引擎的触发方法，属于图计算技术领域，解决了现有图计算引擎的编译过程执行效率较差的问题。触发方法包括：接收OpenCypher操作指令；启动Cypher编译器，对OpenCypher操作指令进行语法及语义解译，将解译后的OpenCypher操作命令编译为分布式逻辑执行计划，并根据分布式逻辑执行计划生成在分布式环境下执行的物理执行计划；向GraphMaster进行注册并申请资源；GraphMaster根据物理执行计划获取待执行任务，将待执行任务分解成多个一级任务，并将各一级任务分配给不同的GraphSlave；GraphSlave将接收到的一级任务分解成多个二级任务，并将各二级任务分配给不同的Worker，由Worker执行相应二级任务；所有待执行任务完成后，向GraphMaster申请资源注销，等待接收下一次OpenCypher操作指令。
-
Patent Agency Ranking
公开(公告)号：CN117828165A
公开(公告)日：2024-04-05
申请号：CN202311842554.1
申请日：2023-12-28
Applicant: 中国兵器工业计算机应用技术研究所
IPC: G06F16/9532 , G06F16/332 , G06F16/31 , G06F16/182 , G06F9/50
Abstract: 本发明涉及一种分布式搜索计算引擎，包括：包括索引存储管理模块和搜索计算模块，其中：索引存储管理模块用于基于文档数据创建索引，将索引分为多个索引分片分散存储在多个物理分片上，物理分片上还存储有该索引分片对应的文档数据；物理分片的数量基于搜索集群各物理节点的性能和索引的数据量计算得到；搜索计算模块用于基于客户端输入的搜索关键词，通过查询操作在各个索引分片中进行关键词匹配及匹配度计算，得到多个匹配文档的文档ID；并通过取值操作，基于文档ID和路由公式，从对应的物理分片中获取得到匹配文档。本发明解决了现有技术中的搜索计算引擎没有考虑集群节点的性能和索引数据量，导致索引性能和集群性能受限的问题。
-
公开(公告)号：CN117332270A
公开(公告)日：2024-01-02
申请号：CN202311292970.9
申请日：2023-10-08
Applicant: 中国兵器工业计算机应用技术研究所
IPC: G06F18/214 , G06F18/24 , G06F16/21 , G06F16/22 , G06N3/0455 , G06N3/08
Abstract: 本发明涉及一种基于零样本重放的增量学习方法，属于机器学习方法领域。该方法包括以下步骤：获取物联网设备的实时监控数据；构建物联网监控模型，利用所述物联网监控模型对所述监控数据进行预测得到预测后的监控数据；利用完善的标签体系对预测后的监控数据进行自动化标注；基于零样本重放的方法构建训练样本集对所述物联网监控模型进行训练得到训练好的物联网监控模型；将标注后的监控数据输入训练好的物联网监控模型得到高亮显示的关键信息。该方法使用标注过的样本集进行模型训练，提高了模型抽取信息的准确率以及训练的效率；在增量学习过程中通过同时使用旧样本的样本特征和新样本，在避免产生灾难性遗忘的同时节省了数据存储的开销。
-
公开(公告)号：CN115599524A
公开(公告)日：2023-01-13
申请号：CN202211329376.8
申请日：2022-10-27
Applicant: 中国兵器工业计算机应用技术研究所(CN)
IPC: G06F9/48
Abstract: 本发明涉及一种基于流数据和批数据协同调度处理的数据湖系统，属于数据处理技术领域；解决现有技术在构建数据湖或对数据湖中的数据进行处理时无法实现流数据与批数据处理任务的混合编排，效率低的问题；本发明的数据湖系统包括：集中式存储模块、计算引擎模块和数据管理模块；其中，集中式存储模块用于分类存储各个业务数据源的数据；数据管理模块用于进行数据处理任务编排，并基于预设的数据处理任务协同调度方法，对每个节点的数据处理任务进行调度处理；计算引擎模块用于基于数据处理任务需求，通过不同的计算引擎对集中式存储模块中的数据进行处理，并将处理后的数据基于数据处理任务的需求进行推送或存入集中式存储模块中。
-
公开(公告)号：CN116150263B
公开(公告)日：2023-07-25
申请号：CN202211240196.2
申请日：2022-10-11
Applicant: 中国兵器工业计算机应用技术研究所
Inventor： 孟英谦 , 彭龙 , 杜宏博 , 李胜昌 , 梁冬 , 鲁东民 , 葛晋鹏 , 郭亚辉 , 米丽媛 , 饶雷 , 张帅 , 邵鹏志 , 王乃正 , 薛行 , 徐天敕 , 王嘉岩 , 随秋林
IPC: G06F16/27 , G06F16/28 , G06F16/2458 , G06F8/41
Abstract: 本发明涉及一种分布式图计算引擎，属于涉及图计算技术领域，解决了现有分布式图计算引擎在编译性和存储方面存在的缺陷。分布式图计算引擎包括：分布式图存储引擎模块，采用“多Master‑多Worker”的方式构建分布式图数据库系统，用于对图数据进行管控及数据处理操作；Cyper编译器，用于实现标准OpenCypher语言的语法及语义解译，将解译后的OpenCypher操作命令编译为分布式逻辑执行计划，并根据分布式逻辑执行计划生成在分布式环境下执行的物理执行计划；分布式图执行引擎模块，用于为用户提供实时图查询和离线图分析服务；图分析算法模块，用于构建图谱挖掘模型；OpenCypher接口模块，用于实现用户通过扩展的openCypher语言访问分布式图计算引擎。
-
公开(公告)号：CN115599524B
公开(公告)日：2023-06-09
申请号：CN202211329376.8
申请日：2022-10-27
Applicant: 中国兵器工业计算机应用技术研究所
IPC: G06F9/48
Abstract: 本发明涉及一种基于流数据和批数据协同调度处理的数据湖系统，属于数据处理技术领域；解决现有技术在构建数据湖或对数据湖中的数据进行处理时无法实现流数据与批数据处理任务的混合编排，效率低的问题；本发明的数据湖系统包括：集中式存储模块、计算引擎模块和数据管理模块；其中，集中式存储模块用于分类存储各个业务数据源的数据；数据管理模块用于进行数据处理任务编排，并基于预设的数据处理任务协同调度方法，对每个节点的数据处理任务进行调度处理；计算引擎模块用于基于数据处理任务需求，通过不同的计算引擎对集中式存储模块中的数据进行处理，并将处理后的数据基于数据处理任务的需求进行推送或存入集中式存储模块中。
-
-
-
-
-
-
-
-
-
Search Results
21
records
(took 0.038 seconds)
