在分布式存储系统中确定事件之间关系的方法及装置

    公开(公告)号:CN108984101A

    公开(公告)日:2018-12-11

    申请号:CN201710404747.7

    申请日:2017-06-01

    Inventor: 钟延辉 何彦斌

    Abstract: 本发明公开了一种在分布式存储系统中确定事件之间关系的方法及装置。该方法包括:获得目标数据的第一事件对应的第一混合逻辑时钟以及目标数据的第二事件对应的第二混合逻辑时钟;其中,第一混合逻辑时钟包括第一集群逻辑计数,第二混合逻辑时钟包括第二集群逻辑计数,第一集群逻辑计数和第二集群逻辑计数表示目标数据的事件的发生顺序;计算第一集群逻辑计数和第二集群逻辑计数的第一差值;当第一差值的绝对值等于预设值时,确定第一事件与第二事件的触发关系为直接关系。本发明实施例能够解决无法确定事件之间关系是否为直接触发关系的问题。

    一种解决数据冲突的方法和系统

    公开(公告)号:CN106802939A

    公开(公告)日:2017-06-06

    申请号:CN201611257463.1

    申请日:2016-12-30

    Inventor: 钟延辉

    Abstract: 一种多活系统中解决数据冲突的方法,接入节点接收客户端发送的第一数据更新请求,并对第一数据更新请求生成一个全球唯一的版本号;接入节点向存储节点发送第二数据更新请求,第二数据更新请求中携带该版本号;存储节点根据第二数据更新请求更新对应的数据和更新偏序关系,并向接入节点返回偏序关系;偏序关系用于记录存储节点接收到的数据更新请求的版本号的先后顺序;接入节点获取存储节点返回的偏序关系,判断存储节点中的数据是否存在冲突;当存储节点中的数据存在冲突时,接入节点调整所述冲突。当存储节点中的数据存在冲突时,接收节点才调整数据存在的冲突,大大提高了数据的更新效率。

    一种数据备份方法、节点及数据备份系统

    公开(公告)号:CN106528330A

    公开(公告)日:2017-03-22

    申请号:CN201610926460.6

    申请日:2016-10-29

    Inventor: 钟延辉 张宗全

    CPC classification number: G06F11/1425 G06F11/1489

    Abstract: 本发明实施例提供了一种数据备份方案,在该数据备份方案中,备份数据保护域中的节点接收至少两个数据保护域中的节点发送的第一版本数据,将第一版本数据进行校验操作得到第一校验数据,存储第一校验数据,接收至少两个数据保护域中的节点发送的压缩的差异数据,将第一校验数据与差异数据进行校验操作得到第二校验数据,存储第二校验数据;其中,差异数据表示第二版本数据与第一版本数据之间差异的数据,第二版本数据为第一版本数据修改后的数据。

    数据处理方法及装置
    14.
    发明公开

    公开(公告)号:CN106021460A

    公开(公告)日:2016-10-12

    申请号:CN201610327050.X

    申请日:2012-12-28

    Inventor: 钟延辉 张宗全

    CPC classification number: G06F16/162

    Abstract: 本发明实施例提供数据处理方法和装置,通过本发明实施例,当发现当前接收的数据流中数据散列值超过预设的第一阈值时,将数据流中的部分或全部数据不做重删,直接进行存储,而避免数据流中的数据被分散存储到多个存储区域中,而会集中地存储到存储区域中,尤其是数据存储量大的场景下,从整体上有效提高重删率。

    灾备端、生产端及两者之间的数据恢复方法

    公开(公告)号:CN109783277B

    公开(公告)日:2023-12-29

    申请号:CN201910134500.7

    申请日:2015-11-18

    Abstract: 本发明提供一种灾备端、生产端及两者之间的数据恢复方法。所述方法包括:灾备端周期性的为生产端中的数据生成副本,并存储周期性生成的副本,其中所述数据包括源数据及源数据的差量数据;灾备端选取被存储的副本,并利用其恢复对应的数据,以代替生产端执行其功能,其中所述被选取的副本包括最新生成的副本及在最新生成的副本之前生成的副本。本发明由灾备端一个系统融合容灾和备份这两种功能,能够降低购买和维护成本、提高存储空间的利用率。

    一种跨引擎事务的处理方法、装置、设备及介质

    公开(公告)号:CN113760857A

    公开(公告)日:2021-12-07

    申请号:CN202010505334.X

    申请日:2020-06-05

    Abstract: 本申请公开了一种跨引擎事务的处理方法,该方法可以应用于数据库系统中,该数据库系统中至少可以包括第一数据库引擎以及第二数据库引擎,该方法包括:获取时序信息,时序信息可以指示第一跨引擎事务的第一子事务不迟于第二跨引擎事务的第一子事务执行目标操作,目标操作可以是在第一数据库引擎中访问数据,并且,根据获取的时序信息,可以确定第一跨引擎事务的第二子事务在第二数据库引擎中最先访问到的数据在时序上不迟于第二跨引擎事务的第二子事务在第二数据库引擎中最先访问到的数据,从而使得两个跨引擎事务所访问到的数据在时序上保持一致。另外,本申请还公开了一种跨引擎事务的处理装置、设备和介质。

    写数据的方法和装置
    17.
    发明授权

    公开(公告)号:CN108418859B

    公开(公告)日:2020-11-06

    申请号:CN201810068940.2

    申请日:2018-01-24

    Abstract: 本申请提供了一种写数据的方法和装置,该方法可以应用于双活集群,双活集群包括第一集群和第二集群,第一集群中设置有远端预写日志WAL,方法包括:客户端向双活集群发送写请求,写请求记录待存储的目标数据;若第一集群按照预设规则存储目标数据成功,且第二集群按照预设规则写目标数据失败,客户端接收第一响应消息,第一响应消息指示第二集群按照预设规则写目标数据失败;客户端向第一集群的远端WAL中写入目标数据,远端WAL用于指示第一集群将远端WAL存储的目标数据存储到第二集群。有利于在维护双活集群中目标数据的一致性方面,降低对客户端的依赖性,减小客户端的开发代价。

    一种基于写时复制的文件系统中回收检查点的方法和装置

    公开(公告)号:CN103984609B

    公开(公告)日:2017-06-16

    申请号:CN201410231326.5

    申请日:2014-05-28

    CPC classification number: G06F17/30088 G06F17/30 G06F17/30079

    Abstract: 本发明实施例公开了一种基于写时复制的文件系统中回收检查点的方法和装置,所述回收检查点的方法包括:根据检查点回收指令获得所述文件系统在上次检查点回收时刻到本次检查点回收时刻之间分配的M个数据块,M为不小于1的整数;其中,所述M个数据块为上次检查点回收时刻到本次检查点回收时刻之间生成的检查点和快照中的至少一种分配的数据块;对所述M个数据块中需要保留的数据块的引用次数进行固定步长的加操作,从所述M个数据块中确定需要回收的第一数据块;从为所述上次检查点回收时刻保留的检查点和快照中的至少一种分配的N个数据块中确定需要回收的第二数据块,N为不小于1的整数;回收所述第一数据块和所述第二数据块。

    一种基于图像的重复数据删除方法及装置

    公开(公告)号:CN105550352A

    公开(公告)日:2016-05-04

    申请号:CN201511000492.5

    申请日:2015-12-28

    Inventor: 钟延辉 曾凯

    CPC classification number: G06F16/51 G06F16/162

    Abstract: 本发明涉及一种基于图像的重复数据删除方法及装置,本发明实施例提供方法包括:获取待存储图像的像素矩阵;根据像素矩阵,分割待存储图像获得图像分块,并获得图像分块的弱分块指纹;判断指纹库中是否存在与弱分块指纹相同的弱参考指纹,当指纹库中存在与弱分块指纹相同的弱参考指纹时,获取弱参考指纹;根据弱参考指纹从图像库中获取第一参考图像分块;根据第一参考图像分块对图像分块进行压缩获得压缩图像分块,存储压缩图像分块;当指纹库中不存在与弱分块指纹相同的弱参考指纹时,则将弱分块指纹作为新的弱参考指纹存入指纹库,以及将图像分块存入图像库。本发明提供的一种基于图像的重复数据删除方法及装置,提高了图像重复数据的重删率,增加了图像的缩减比,提高了图像的存储、传输和处理速度。

    文件系统的数据回收方法及装置

    公开(公告)号:CN103886070A

    公开(公告)日:2014-06-25

    申请号:CN201410108824.0

    申请日:2014-03-21

    CPC classification number: G06F17/30067 G06F3/0608 G06F3/064

    Abstract: 本发明涉及一种文件系统的数据回收方法及装置,所述方法包括:在生成新数据块时,记录所述新数据块的引用信息,所述引用信息用于记录所述新数据块所直接引用的原有数据块的信息;所述新数据块是从该直接引用的原有数据块复制而来;扫描所述新数据块,对所述新数据块的引用计数进行加操作;根据所述新数据块的引用信息,将所述新数据块所直接引用的原有数据块的引用计数进行减操作;进行减操作后的引用计数满足要求时,对所述原有数据块进行回收。本发明实施例提供的文件系统的数据回收方法及装置,可以有效地缩短引用计数的更新时间,加快数据回收的速度,减轻文件系统的压力。

Patent Agency Ranking