-
公开(公告)号:CN102156727A
公开(公告)日:2011-08-17
申请号:CN201110082513.8
申请日:2011-04-01
Applicant: 华中科技大学
Abstract: 本发明提出了一种采用双指纹哈希校验的重复数据删除方法,包括将待备份对象划分成等长的待备份数据块;判断其中一个待备份数据块的弱指纹与服务器中任意一个数据块的弱指纹是否相同,若不同,则对该数据块进行备份;若相同,则判断该数据块的强指纹与服务器中任意一个数据块的强指纹是否相同,若不同,则对该数据块进行备份;对所有待备份数据块均进行上述操作。本发明所述的重复数据删除方法首先采用计算量低的哈希函数对每个数据块进行弱校验,再采用计算量大的哈希函数进行强校验,从而避免全部数据都采用计算量大的哈希函数来校验,大大降低了校验过程中的指纹计算量,提升系列性能,为基于海量数据存储的数据备份提供可观的传输性能。