-
公开(公告)号:CN104484480A
公开(公告)日:2015-04-01
申请号:CN201410854706.4
申请日:2014-12-31
Applicant: 华为技术有限公司
IPC: G06F17/30
CPC classification number: G06F17/30159 , G06F11/1453 , G06F17/30 , G06F17/30088 , G06F17/301 , G06F17/30156 , G06F17/30215
Abstract: 本发明实施例提供一种基于重复数据删除的远程复制方法及装置。本发明基于重复数据删除的远程复制方法,应用于远程复制系统中,所述系统包括:主端设备和容灾端设备,所述主端设备和所述容灾端设备均存储第一快照,所述方法包括:主端设备获取所述主端设备的第二快照;所述主端设备判断所述第二快照中相对第一快照增加的数据块的指纹是否与所述第一快照中的数据块的指纹相同;当所述增加的数据块中的第一数据块的指纹与所述第一快照中的数据块的指纹不同,将所述第一数据块、所述第一数据块的指纹和所述增加的数据块的元数据发送给所述容灾端设备。本发明实施例提高了远程复制容灾备份的性能。
-
公开(公告)号:CN103502957A
公开(公告)日:2014-01-08
申请号:CN201280004663.X
申请日:2012-12-28
Applicant: 华为技术有限公司
CPC classification number: G06F3/0641 , G06F3/0608 , G06F3/061 , G06F3/0619 , G06F3/067 , G06F3/0673 , G06F12/0868 , G06F12/0875 , G06F2212/452
Abstract: 本发明实施例提供数据处理方法和装置,通过本发明实施例,当发现当前接收的数据流中数据散列值超过预设的第一阈值时,将数据流中的部分或全部数据不做重删,直接进行存储,而避免数据流中的数据被分散存储到多个存储区域中,而会集中地存储到存储区域中,尤其是数据存储量大的场景下,从整体上有效提高重删率。
-
公开(公告)号:CN109213621B
公开(公告)日:2021-08-31
申请号:CN201710553141.X
申请日:2017-07-07
Applicant: 华为技术有限公司
Abstract: 本文公开了一种数据处理方法及数据处理设备,该方法包括:确定至少两个第一待校验数据块,所述至少两个第一待校验数据块分别所属的备副本数据来自不同的数据中心;将所述至少两个第一待校验数据块进行校验处理,得到第一校验数据;将所述第一校验数据存储至第一聚合数据块;其中,所述第一聚合数据块包含有第二校验数据;建立所述第一聚合数据块至所述第一校验数据的反向索引和所述第一聚合数据块至所述第二校验数据的反向索引;将所述第一聚合数据块写入存储单元,从而精简备副本数据的元数据的结构,有利于该元数据进行缓存,并能够提升数据处理效率。
-
公开(公告)号:CN113282545A
公开(公告)日:2021-08-20
申请号:CN202010105240.3
申请日:2020-02-20
Applicant: 华为技术有限公司
Abstract: 本申请提供了一种合并数据的方法、装置、计算设备和存储介质,所属的技术领域为存储技术领域。该方法包括:在进行合并处理时,获取执行增量检查点事件获得的目标数据表的第一更新日志记录的元数据信息,其中,该元数据信息包括第一更新日志记录在内存中的目标数据表中的位置,根据第一更新日志记录的元数据信息,确定第一更新日志记录对应的散列度,根据该散列度,对第一更新日志记录进行合并处理。采用本申请,可以降低合并处理时的读写放大。
-
-
公开(公告)号:CN108984101B
公开(公告)日:2020-05-08
申请号:CN201710404747.7
申请日:2017-06-01
Applicant: 华为技术有限公司
IPC: G06F3/06
Abstract: 本发明公开了一种在分布式存储系统中确定事件之间关系的方法及装置。该方法包括:获得目标数据的第一事件对应的第一混合逻辑时钟以及目标数据的第二事件对应的第二混合逻辑时钟;其中,第一混合逻辑时钟包括第一集群逻辑计数,第二混合逻辑时钟包括第二集群逻辑计数,第一集群逻辑计数和第二集群逻辑计数表示目标数据的事件的发生顺序;计算第一集群逻辑计数和第二集群逻辑计数的第一差值;当第一差值的绝对值等于预设值时,确定第一事件与第二事件的触发关系为直接关系。本发明实施例能够解决无法确定事件之间关系是否为直接触发关系的问题。
-
公开(公告)号:CN110968256A
公开(公告)日:2020-04-07
申请号:CN201811157257.2
申请日:2018-09-30
Applicant: 华为技术有限公司
IPC: G06F3/06
Abstract: 一种数据处理方法及装置,该方法可包括:第一计算节点接收客户端发送的写入命令,所述第一计算节点根据范围分区算法的路由视图以及计算节点与文件的对应关系,确定所述第一数据对应的第一文件,所述第一计算节点将所述第一数据,存储至所述第一文件,所述第一计算节点根据所述计算节点与文件的对应关系,确定所述第一计算节点所对应的第二文件,所述第一计算节点获取除所述第一计算节点外的其它计算节点所存储的第二文件,所述第一计算节点存储所获取的所述其它计算节点的第二文件,采用本申请的方法可避免计算节点写入热点的问题,且保证读取数据的速率。
-
公开(公告)号:CN106802939B
公开(公告)日:2020-04-03
申请号:CN201611257463.1
申请日:2016-12-30
Applicant: 华为技术有限公司
Inventor: 钟延辉
IPC: G06F16/182 , G06F16/178 , G06F16/13
Abstract: 一种多活系统中解决数据冲突的方法,接入节点接收客户端发送的第一数据更新请求,并对第一数据更新请求生成一个全球唯一的版本号;接入节点向存储节点发送第二数据更新请求,第二数据更新请求中携带该版本号;存储节点根据第二数据更新请求更新对应的数据和更新偏序关系,并向接入节点返回偏序关系;偏序关系用于记录存储节点接收到的数据更新请求的版本号的先后顺序;接入节点获取存储节点返回的偏序关系,判断存储节点中的数据是否存在冲突;当存储节点中的数据存在冲突时,接入节点调整所述冲突。当存储节点中的数据存在冲突时,接收节点才调整数据存在的冲突,大大提高了数据的更新效率。
-
公开(公告)号:CN109947724A
公开(公告)日:2019-06-28
申请号:CN201910135858.1
申请日:2015-12-30
Applicant: 华为技术有限公司
IPC: G06F16/176 , G06F9/54
Abstract: 本发明实施例提供一种分布式锁服务方法和装置。该方法包括,接收数据操作请求;确定与该数据操作请求对应的目标互联网协议IP盘;从该目标IP盘中的锁管理服务端DLMS获取与该数据操作请求对应的目标分布式锁;从该目标IP盘中获取目标数据,以便于在该目标分布式锁的租约期限内对该目标数据进行处理。本发明实施例能减少物理部署,降低分布式系统的复杂度。
-
公开(公告)号:CN109783277A
公开(公告)日:2019-05-21
申请号:CN201910134500.7
申请日:2015-11-18
Applicant: 华为技术有限公司
IPC: G06F11/14
Abstract: 本发明提供一种灾备端、生产端及两者之间的数据恢复方法。所述方法包括:灾备端周期性的为生产端中的数据生成副本,并存储周期性生成的副本,其中所述数据包括源数据及源数据的差量数据;灾备端选取被存储的副本,并利用其恢复对应的数据,以代替生产端执行其功能,其中所述被选取的副本包括最新生成的副本及在最新生成的副本之前生成的副本。本发明由灾备端一个系统融合容灾和备份这两种功能,能够降低购买和维护成本、提高存储空间的利用率。
-
-
-
-
-
-
-
-
-