一种数据同步方法、装置、设备及计算机可读存储介质

    公开(公告)号:CN113806445A

    公开(公告)日:2021-12-17

    申请号:CN202111094464.X

    申请日:2021-09-17

    Abstract: 本申请公开了一种数据同步方法、装置、设备及计算机可读存储介质,应用于分布式对象存储系统,获取待同步的目标数据;确定目标数据的写入时间戳;确定各个已有同步策略的生成时间戳;将小于写入时间戳且与写入时间戳最接近的生成时间戳对应的已有同步策略,确定为目标同步策略;基于目标同步策略对目标数据进行同步。本申请中,目标数据及同步策略均有相应的时间戳,且需将小于写入时间戳且与写入时间戳最接近的生成时间戳对应的已有同步策略,确定为目标同步策略,使得目标同步策略与目标数据相匹配,这样,基于目标同步策略对目标数据进行同步的话,可以提高目标数据的同步准确性。

    一种对象存储有序列举方法、装置、终端及存储介质

    公开(公告)号:CN113806249A

    公开(公告)日:2021-12-17

    申请号:CN202111069552.4

    申请日:2021-09-13

    Inventor: 程晓煜 陶桐桐

    Abstract: 本发明公开一种对象存储有序列举方法、装置、终端及存储介质,每次列举N个对象,每个桶有M个桶分片,接收到客户端的列举请求时,检测缓存map中是否包含所需列举对象对应桶的缓存;若不包含,则从底层相应桶的M个桶分片中读取M*N个对象,每个桶分片读取N个对象,从该M*N个对象中有序列举N个对象发送至客户端,并将剩余(M‑1)*N个对象存至缓存map中;该剩余(M‑1)*N个对象为该桶在缓存map中的缓存;若包含,则从对应桶的缓存中有序列举N个对象发送至客户端。本发明一方面可以减少和底层的交互,减少集群压力;另一方面,直接从内存读,相对于之前从底层(硬盘)读的方式,可以显著提高列举的速度。

    分布式存储服务端QoS优化方法、系统、终端及存储介质

    公开(公告)号:CN113687780A

    公开(公告)日:2021-11-23

    申请号:CN202110872204.4

    申请日:2021-07-30

    Abstract: 本发明提供一种分布式存储服务端QoS优化方法、系统、终端及存储介质,包括:预先设置服务质量模板的各参数项的取值范围;利用随机算法根据各参数项的取值范围生成多目标优化算法的初始种群;预先构建基于服务质量模板的参数项取值的客户端请求处理速度目标函数和内部请求处理速度目标函数;利用客户端请求处理速度目标函数和内部请求处理速度目标函数计算种群适应度;按非支配排序方法选择适应度高的种群进行优化迭代,得到服务质量模板的参数项取值最优方案集。本发明可有效处理调度服务器内外的I/O请求,得到最优的配置参数,使用者可根据这些最优解集以及自己的实际需要来配置QoS模板参数,从而提高集群的服务质量。

    一种数据同步的异常检测方法和装置

    公开(公告)号:CN113420082A

    公开(公告)日:2021-09-21

    申请号:CN202110594461.6

    申请日:2021-05-28

    Abstract: 本发明公开了一种数据同步的异常检测方法和装置,方法包括:在作为数据同步的目的端的从站点遍历多个对象桶的多个桶分片,分别获取多个桶分片的最后写入对象的当前从站点对象标识;从作为数据同步的源端的主站点获取在每个桶分片中与多个当前从站点对象标识一一对应的多个当前主站点对象标识;将一一对应的多个当前从站点对象标识和多个当前主站点对象标识相互比较,并在从站点读取桶分片同步进度对象属性监视器中的历史从站点对象标识和历史主站点对象标识;基于上述比较和读取的结果确定特定桶分片为同步异常的桶分片。本发明能够精准检测数据同步的异常现象,优化数据同步功能,提升使用体验。

Patent Agency Ranking