公开(公告)号：CN120030078A

公开(公告)日：2025-05-23

申请号：CN202510176333.8

申请日：2025-02-18

Applicant: 西北农林科技大学

Inventor： 苏宝峰 ,  黄奕凯 ,  梁劼祥 ,  聂灵芝 ,  徐法虎 ,  孙世坤

IPC: G06F16/25 ,  G06F16/2457 ,  G06F16/28

Abstract: 本发明公开一种针对灌溉多源异构数据的汇聚存取方法、系统、设备及介质，涉及大数据处理技术领域。所述方法包括：获取灌溉多源异构数据；存储的过程为：对灌溉多源异构数据按数据类型和关联性进行分类，并进行预处理，将设定关联性强度的同类型数据进行数据去重及整合，将相同关联性强度的不同类型数据进行格式转换与数据整合，得到汇聚的多源异构数据；根据数据类型和关联性，将汇聚的多源异构数据分别存入MySQL和MongoDB；提取的过程为：根据当前业务需求，确定数据筛选条件和所属数据源；查询所属数据源中的数据记录或索引，根据数据筛选条件提取相关数据，并根据业务需求对相关数据进行分离。本发明能够解决传统方法无法融合异构数据、融合效率低的问题。