一种具有与并行文件系统结合的重复数据删除文件系统的架构及方法

    公开(公告)号:CN103279502B

    公开(公告)日:2016-01-20

    申请号:CN201310168444.1

    申请日:2013-05-06

    Inventor: 周晓阳 周游

    CPC classification number: Y02D10/45

    Abstract: 本发明是一种具有与并行文件系统结合的重复数据删除文件系统的架构及方法,所述架构在客户端设备部署有重复数据删除系统文件访问接口,重复数据删除网关上部署有重复数据删除处理引擎和数据迁移系统,并行文件系统提供访问接口给客户端设备和重复数据删除网关,重复数据删除处理引擎和数据迁移系统实现对文件数据的重复数据删除、还原及迁移处理。本发明方法将并行文件系统中达到迁移条件的数据迁移到重复数据删除文件系统中存储,对迁移的数据进行重复数据删除,实现从客户端设备读取已迁移数据的操作。本发明在已有并行文件系统中透明地加入重复数据删除文件系统,降低对业务系统的影响,节省了存储空间,降低了数据中心管理成本和能耗成本。

    支持重复数据删除文件系统中数据更新时的数据保护方法

    公开(公告)号:CN103294957A

    公开(公告)日:2013-09-11

    申请号:CN201310163006.6

    申请日:2013-05-06

    Inventor: 孙宪武 周游

    Abstract: 本发明提供了一种支持重复数据删除文件系统中数据更新时的数据保护方法,用于实现对存量数据的数据块和索引的一致性保障,属于信息安全领域。本发明方法所应用的重复数据删除文件系统中,将文件的数据流划分为数据块存储,设置的数据存储结构主要包括文件块索引集、数据块集和数据块索引集三部分;结合三部分的数据存储结构实现三种操作:生成校验数据的操作;更新数据的操作;删除数据的操作。本发明方法有效地解决了重复数据消除系统中数据更新过程中数据索引一致性保障的问题,确保数据更新失败后存量数据的正确性,增强系统的数据安全性,保证系统的稳定性,有效降低系统的维护成本。

    一种应用于消冗文件系统的测试工具及方法

    公开(公告)号:CN103294593A

    公开(公告)日:2013-09-11

    申请号:CN201310162991.9

    申请日:2013-05-06

    Inventor: 张坤 周游

    Abstract: 本发明公开了一种应用于消冗文件系统的测试工具及方法,测试工具包括顺序写入/读取模块、随机写入/读取模块、重复率控制模块、删除模块、模拟模块、满负荷写入/读取模块、循环写入模块;测试方法包括以下几个方面:(1)对消冗文件系统进行消冗率测试、(2)对消冗文件系统顺序读写性能测试、(3)对消冗文件系统随机读写性能测试、(4)多进程下的同步读写性能测试、(5)对消冗文件系统读写I/O测试、(6)对消冗文件系统稳定性测试。本发明的测试工具可以完成对上述测试项的测试,并且使用简单,只需输入较少的命令,自动收集测试结果,形成文件;本发明具有很强的实用性,具有很广泛的应用前景。

    一种应用于消冗文件系统的测试工具及方法

    公开(公告)号:CN103294593B

    公开(公告)日:2017-04-05

    申请号:CN201310162991.9

    申请日:2013-05-06

    Inventor: 张坤 周游

    Abstract: 本发明公开了一种应用于消冗文件系统的测试工具及方法,测试工具包括顺序写入/读取模块、随机写入/读取模块、重复率控制模块、删除模块、模拟模块、满负荷写入/读取模块、循环写入模块;测试方法包括以下几个方面:(1)对消冗文件系统进行消冗率测试、(2)对消冗文件系统顺序读写性能测试、(3)对消冗文件系统随机读写性能测试、(4)多进程下的同步读写性能测试、(5)对消冗文件系统读写I/O测试、(6)对消冗文件系统稳定性测试。本发明的测试工具可以完成对上述测试项的测试,并且使用简单,只需输入较少的命令,自动收集测试结果,形成文件;本发明具有很强的实用性,具有很广泛的应用前景。

    一种应用于海量数据存储系统元数据测试的测试工具及方法

    公开(公告)号:CN104850584A

    公开(公告)日:2015-08-19

    申请号:CN201510184530.0

    申请日:2015-04-17

    Inventor: 张坤 周游

    Abstract: 本发明公开了一种应用于海量数据存储系统元数据测试的测试工具及方法,测试工具包括目录创建/删除模块、文件创建/删除模块、目录和文件读取模块、目录和文件更新模块、文件截取模块、多文件合并模块,模拟模块。本发明的工具,包括对目录和文件的创建和删除性能测试、稳定性测试、文件截断和合并测试,一个工具即可完成对上述测试项的测试,并且使用简单,只需输入较少的命令即可,自动收集测试结果,形成文件。

    一种重复数据删除系统数据存取方法

    公开(公告)号:CN104793902A

    公开(公告)日:2015-07-22

    申请号:CN201510184509.0

    申请日:2015-04-17

    Inventor: 孙宪武 周游

    Abstract: 本发明公开了一种基于重复数据删除系统的数据存储方法,首先,根据数据布局策略对数据进行规则性存储,然后,采用预读策略进行数据读取;本发明实现了对重复数据删除系统顺序读性能的优化,最大限度的满足了应用系统的读性能需求,在有限的资源环境下提供了良好的读取性能,这就使得本系统做到对用户收益最大化。

    一种具有与并行文件系统结合的重复数据删除文件系统的架构及方法

    公开(公告)号:CN103279502A

    公开(公告)日:2013-09-04

    申请号:CN201310168444.1

    申请日:2013-05-06

    Inventor: 周晓阳 周游

    CPC classification number: Y02D10/45

    Abstract: 本发明是一种具有与并行文件系统结合的重复数据删除文件系统的架构及方法,所述架构在客户端设备部署有重复数据删除系统文件访问接口,重复数据删除网关上部署有重复数据删除处理引擎和数据迁移系统,并行文件系统提供访问接口给客户端设备和重复数据删除网关,重复数据删除处理引擎和数据迁移系统实现对文件数据的重复数据删除、还原及迁移处理。本发明方法将并行文件系统中达到迁移条件的数据迁移到重复数据删除文件系统中存储,对迁移的数据进行重复数据删除,实现从客户端设备读取已迁移数据的操作。本发明在已有并行文件系统中透明地加入重复数据删除文件系统,降低对业务系统的影响,节省了存储空间,降低了数据中心管理成本和能耗成本。

    支持重复数据删除文件系统中数据更新时的数据保护方法

    公开(公告)号:CN103294957B

    公开(公告)日:2015-10-28

    申请号:CN201310163006.6

    申请日:2013-05-06

    Inventor: 孙宪武 周游

    Abstract: 本发明提供了一种支持重复数据删除文件系统中数据更新时的数据保护方法,用于实现对存量数据的数据块和索引的一致性保障,属于信息安全领域。本发明方法所应用的重复数据删除文件系统中,将文件的数据流划分为数据块存储,设置的数据存储结构主要包括文件块索引集、数据块集和数据块索引集三部分;结合三部分的数据存储结构实现三种操作:生成校验数据的操作;更新数据的操作;删除数据的操作。本发明方法有效地解决了重复数据消除系统中数据更新过程中数据索引一致性保障的问题,确保数据更新失败后存量数据的正确性,增强系统的数据安全性,保证系统的稳定性,有效降低系统的维护成本。

Patent Agency Ranking