基于公用设施多源异构数据的存储方法及装置

    公开(公告)号:CN117828128A

    公开(公告)日:2024-04-05

    申请号:CN202311803345.6

    申请日:2023-12-25

    Abstract: 本发明涉及数据存储处理技术领域,特别涉及一种基于公用设施多源异构数据的存储方法及装置。方法包括:获取待接入公用设施的实时原始数据,原始数据包括运行数据和运维数据;原始数据的数据类型包括结构化数据、半结构化数据和非结构化数据;对获取的原始数据进行分析以得到元数据,并定义该元数据的存储格式;基于公用设施的节点信息和元数据数,生成公用设施对应的索引表;索引表包括至少一层子索引;对原始数据进行预处理并更新索引表,得到预处理后的数据与更新后的索引表之间的映射关系;根据更新后的索引表映射的存储地址对预处理后的数据进行分布式存储。本申请,可以对不同来源和不同种类的数据进行结构化表征和存储,利于检索和访问。

Patent Agency Ranking