一种存储任务断点同步方法、装置、介质及设备

    公开(公告)号:CN117743472B

    公开(公告)日:2024-05-07

    申请号:CN202410171179.0

    申请日:2024-02-06

    Abstract: 本说明书公开了一种存储任务断点同步方法、装置、介质及设备,响应于继续执行指令,确定存储任务的任务标识和存储任务对应的布隆过滤器。根据存储任务,确定目的存储器,以及读取各待存储的数据单元的唯一标识。依次针对每个待存储的数据单元,根据该数据单元的唯一标识,以及布隆过滤器,判断该数据单元是否未存储。若是,将该数据单元存储到目的存储器,更新布隆过滤器,直至将各待存储的数据单元都存储至目的存储器为止。否则继续判断下一个数据单元是否未存储。存储任务中断后继续执行的过程中,通过更新的布隆过滤器,能够高效准确的判断待存储的数据单元是否未存储,使得存储任务中断后能够在断点处及时运行,实现了存储任务的及时完成。

    一种数据存储方法、装置、存储介质及电子设备

    公开(公告)号:CN117591625B

    公开(公告)日:2024-04-12

    申请号:CN202410076461.0

    申请日:2024-01-18

    Abstract: 本说明书公开了一种数据存储方法、装置、存储介质及电子设备,在此方法中,通过对目标数据源进行周期性数据采集,来得到目标数据源中的非结构化数据,并将根据每个非结构化数据对应的元数据生成该非结构化数据对应的数据标识,进而,使用数据标识作为判断依据对每次采集到的非结构化数据进行筛选,以得到待存储数据,同时对预设的数据标识表进行实时更新,并将每个待存储数据对应的数据标识作为结构化数据的标识,对各待存储数据进行存储。使用数据标识作为判断依据来确定待存储的非结构数据,减少了数据冗余,并将这些待存储的非结构数据转化为结构化数据进行存储,大大提高了非结构化数据的存储效率以及查询效率。

    一种基于构建出的数据编排策略生成模型的业务执行方法

    公开(公告)号:CN117407124B

    公开(公告)日:2024-03-12

    申请号:CN202311712642.X

    申请日:2023-12-13

    Abstract: 本说明书公开了一种基于构建出的数据编排策略生成模型的业务执行方法,通过获取各存储设备对应的设备参数以及各存储设备中存储的各数据的访问信息,而后将获取到的信息输入到预先构建出的数据编排策略生成模型,得到针对各数据的数据编排策略。通过得到的针对各数据的数据编排策略,确定出各数据的转移情况以及需要被转移的数据需要转移到的存储设备,进而对各数据进行转移,以通过转移后的各数据,执行目标业务。通过预先构建出的数据编排策略生成模型生成的数据编排策略对各存储设备上存储的数据进行整理,通过更合理的空间分配,增加了对各存储设备的性能的利用率,提高了用户对云存储集群上数据的访问效率。

    一种数据存储方法、装置、存储介质及电子设备

    公开(公告)号:CN117591625A

    公开(公告)日:2024-02-23

    申请号:CN202410076461.0

    申请日:2024-01-18

    Abstract: 本说明书公开了一种数据存储方法、装置、存储介质及电子设备,在此方法中,通过对目标数据源进行周期性数据采集,来得到目标数据源中的非结构化数据,并将根据每个非结构化数据对应的元数据生成该非结构化数据对应的数据标识,进而,使用数据标识作为判断依据对每次采集到的非结构化数据进行筛选,以得到待存储数据,同时对预设的数据标识表进行实时更新,并将每个待存储数据对应的数据标识作为结构化数据的标识,对各待存储数据进行存储。使用数据标识作为判断依据来确定待存储的非结构数据,减少了数据冗余,并将这些待存储的非结构数据转化为结构化数据进行存储,大大提高了非结构化数据的存储效率以及查询效率。

    一种基于构建出的数据编排策略生成模型的业务执行方法

    公开(公告)号:CN117407124A

    公开(公告)日:2024-01-16

    申请号:CN202311712642.X

    申请日:2023-12-13

    Abstract: 本说明书公开了一种基于构建出的数据编排策略生成模型的业务执行方法,通过获取各存储设备对应的设备参数以及各存储设备中存储的各数据的访问信息,而后将获取到的信息输入到预先构建出的数据编排策略生成模型,得到针对各数据的数据编排策略。通过得到的针对各数据的数据编排策略,确定出各数据的转移情况以及需要被转移的数据需要转移到的存储设备,进而对各数据进行转移,以通过转移后的各数据,执行目标业务。通过预先构建出的数据编排策略生成模型生成的数据编排策略对各存储设备上存储的数据进行整理,通过更合理的空间分配,增加了对各存储设备的性能的利用率,提高了用户对云存储集群上数据的访问效率。

    一种存储任务断点同步方法、装置、介质及设备

    公开(公告)号:CN117743472A

    公开(公告)日:2024-03-22

    申请号:CN202410171179.0

    申请日:2024-02-06

    Abstract: 本说明书公开了一种存储任务断点同步方法、装置、介质及设备,响应于继续执行指令,确定存储任务的任务标识和存储任务对应的布隆过滤器。根据存储任务,确定目的存储器,以及读取各待存储的数据单元的唯一标识。依次针对每个待存储的数据单元,根据该数据单元的唯一标识,以及布隆过滤器,判断该数据单元是否未存储。若是,将该数据单元存储到目的存储器,更新布隆过滤器,直至将各待存储的数据单元都存储至目的存储器为止。否则继续判断下一个数据单元是否未存储。存储任务中断后继续执行的过程中,通过更新的布隆过滤器,能够高效准确的判断待存储的数据单元是否未存储,使得存储任务中断后能够在断点处及时运行,实现了存储任务的及时完成。

Patent Agency Ranking