-
公开(公告)号:CN115964372A
公开(公告)日:2023-04-14
申请号:CN202310003731.0
申请日:2023-01-03
Applicant: 中国科学院空间应用工程与技术中心
IPC: G06F16/22 , G06F16/2457 , G06F11/14
Abstract: 本发明涉及工业大数据和产品状态监测数据分析领域,尤其涉及一种空间站有效载荷分布式事件提取方法和系统,方法包括:按照预设分区和备份策略,将空间站的目标类的有效载荷的运行数据文件集划分为不同的子集,将所有的子集分发至不同的并行计算节点;基于Spark框架,每个并行计算节点对各自接收到的子集进行并行事件提取处理,得到每个并行计算节点的事件提取的一次处理结果,并发送至汇总节点,汇总节点对接收到所有的一次处理结果进行聚合统计处理,得到目标类的有效载荷的事件提取结果。多个并行计算节点能够通过对接收到的子集的数据进行同时处理,处理有效载荷大数据效率更高。
-
公开(公告)号:CN115964372B
公开(公告)日:2023-11-21
申请号:CN202310003731.0
申请日:2023-01-03
Applicant: 中国科学院空间应用工程与技术中心
IPC: G06F16/22 , G06F16/2457 , G06F11/14
-