一种对象聚合方法、系统、装置及计算机存储介质

    公开(公告)号:CN113687783B

    公开(公告)日:2024-02-13

    申请号:CN202110876875.8

    申请日:2021-07-31

    Abstract: 本申请公开了一种对象聚合方法、系统、装置及计算机存储介质,应用于分布式对象存储系统,包括:S11:接收小对象至存储池;S12:判断小对象是否为覆盖写;S13:若是,则判断与小对象的OID相同的旧对象是否已经聚合;S14:若已经聚合,则将旧对象的位图信息设置为无效,执行S16;S15:若未聚合,则对旧对象直接覆盖写,执行S16;S16:在存储池中利用小对象的OID和修改时间,生成与小对象对应的对象标记;S17:聚合线程利用对象标记获取小对象,并对小对象进行聚合。本申请在新对象聚合后,生成与小对象对应的对象标记,以使聚合线程仍能够通过新的对象标记查找到新的小对象,并重新对小对象进行聚合操作,实现了在覆盖写的同时也能够进行聚

    一种数据聚合方法、装置、设备及计算机可读存储介质

    公开(公告)号:CN113778329B

    公开(公告)日:2023-12-22

    申请号:CN202110744253.X

    申请日:2021-06-30

    Abstract: 本发明公开了一种数据聚合方法、装置、设备及计算机可读存储介质,在多版本功能开启的情况下,本申请中的数据聚合方法对于接收到的存储容量小于预设阈值的目标数据,可以在将其本体数据聚合至对应的聚合数据的基础上,将该目标数据的版本号以及该目标数据的本体数据在聚合数据中的位置打包放在聚合数据的位图信息中,并且在目标数据的元数据中添加了聚合数据的身份信息,即使存在重名的目标数据,由于每个目标数据的版本号的唯一性,用户也可以根据目标数据的版本号快捷准确地找到目标数据中本体数据的具体位置,也即本申请可以识别不同版本号的重名目标数据,从而不再对重名数据进行覆盖存储,降低了数据丢失的风险,提升了用户体验。

    分布式存储系统桶回收站优化的方法、装置、设备及介质

    公开(公告)号:CN116225336A

    公开(公告)日:2023-06-06

    申请号:CN202310234599.4

    申请日:2023-03-08

    Abstract: 本发明提供了一种分布式存储系统中桶回收站优化的方法、装置、设备及可读介质,方法包括:在分布式存储系统中同时设置桶回收站和桶多版本功能;为桶回收站设置第一开关,并为桶多版本设置第二开关;基于用户的指令选择开启或关闭第一开关或第二开关。通过使用本发明的方案,能够解决当前桶回收站与桶多版本开关一致的问题,增加了桶回收站的实用性,适配用户使用习惯,给客户带来良好的用户体验,优化了桶回收站的功能,提高了市场竞争力。

    数据处理方法、系统、电子设备及计算机可读存储介质

    公开(公告)号:CN115563071A

    公开(公告)日:2023-01-03

    申请号:CN202211262961.0

    申请日:2022-10-14

    Inventor: 何文龙 武模仁

    Abstract: 本申请公开了一种数据处理方法、系统、电子设备及计算机可读存储介质,涉及分布式存储领域,数据处理方法包括:当接收到客户端发送的上传对象请求,创建与上传对象请求对应的当前版本文件;将当前版本文件对应的元数据信息以文件系统支持的扩展属性记录到与上传对象请求对应的逻辑头文件中;显示逻辑头文件,以便客户端基于元数据信息对任一版本文件进行处理。本申请能够保存多版本的元数据信息,使分布式S3‑NAS融合互通存储系统支持S3协议的多版本功能,从而解决了用户误删数据后不能恢复的问题,丰富了分布式融合互通存储的功能,提高了分布式存储系统的市场竞争力。

    一种数据处理方法和装置
    15.
    发明公开

    公开(公告)号:CN113625959A

    公开(公告)日:2021-11-09

    申请号:CN202110745186.3

    申请日:2021-06-30

    Abstract: 本申请公开了一种数据处理方法和装置,多个数据大小不超过第一阈值的元对象聚合得到第一条带对象,在存在元对象删除时,可以获取一级位图信息;根据所述一级位图信息确定二级位图信息,所述二级位图信息记录了第一条带对象中每个元对象的状态信息;根据所述二级位图信息中的状态信息,确定所述第一条带对象中每个元对象的有效性;根据每个元对象的有效性对所述第一条带对象进行处理。这样,便可以根据聚合后第一条带对象中每个元对象的有效性,对无效数据进行垃圾回收处理或碎片整理,以提高存储空间有效利用率,大大降低存储空间的浪费。

    一种基于多数据中心的数据同步方法、装置、设备及介质

    公开(公告)号:CN119226396A

    公开(公告)日:2024-12-31

    申请号:CN202411170806.5

    申请日:2024-08-23

    Abstract: 本发明实施例提供了一种基于多数据中心的数据同步方法,所述方法包括:将任一数据中心作为数据同步的源数据中心,并确定源数据中心进行数据同步对应的目标数据中心;在源数据中心设置配置信息;根据配置信息建立源数据中心的源桶与目标数据中心的目标桶之间的数据同步连接;根据数据同步连接为源数据中心的任一源桶设置同步策略;根据同步策略将源桶中的数据同步到目标桶中。通过本发明实施例,放宽了多站点环境部署的条件,提高了易用性和实用性;通过数据同步连接的创建,将数据同步的源和目的关联起来,增加了数据同步的灵活性;通过给桶设置数据同步策略,增加了多站点之间数据同步的多样性,给客户带来更多的选择。

    一种多站点环境搭建方法、装置、交换机及服务器

    公开(公告)号:CN116668471A

    公开(公告)日:2023-08-29

    申请号:CN202310782104.1

    申请日:2023-06-29

    Abstract: 本发明公开了一种多站点环境搭建方法、装置、交换机及服务器,涉及分布式对象存储技术领域,该方法应用于交换机,包括:获取预设交换机IP对应的多站点管理界面触发的主站点搭建指令;与主站点搭建指令对应的第一目标站点进行交互,将第一目标站点配置为领域中的主站点;其中,主站点的管理界面IP为预设交换机IP;根据获取的多站点管理界面触发的领域的从站点搭建指令,与第二目标站点进行交互,将各第二目标站点分别配置为领域中的从站点;本发明利用与各站点连接的交换机对外提供的预设交换机IP,仅通过一个预设交换机IP便可搭建起多站点环境,从而简化了多站点环境的搭建和后续管理的操作流程,节省了用户时间,提升了用户体验。

    对象存储系统的元数据管理方法、系统、设备及存储介质

    公开(公告)号:CN116643696A

    公开(公告)日:2023-08-25

    申请号:CN202310579424.7

    申请日:2023-05-19

    Inventor: 何文龙 武模仁

    Abstract: 本申请公开了一种对象存储系统的元数据管理方法、系统、设备及存储介质,应用于存储技术领域,包括:接收对象上传请求;根据对象上传请求,确定出待上传对象的对象数据,待上传对象的各项固有属性元数据,以及待上传对象的各项扩展属性元数据;将待上传对象的各项扩展属性元数据进行汇总,得到一条汇总元数据;执行写操作,以将待上传对象的对象数据,待上传对象的各项固有属性元数据以及汇总后得到的汇总元数据写入硬盘中。应用本申请的方案,有利于提高对象存储系统的对象读写性能。

    一种回收分段上传产生的垃圾的方法、装置、设备及介质

    公开(公告)号:CN116069258A

    公开(公告)日:2023-05-05

    申请号:CN202310139848.1

    申请日:2023-02-17

    Inventor: 何文龙 武模仁

    Abstract: 本发明提供了一种回收分段上传产生的垃圾的方法、装置、设备及可读介质,方法包括:响应于S3存储服务的对象网关启动,在S3存储服务中创建分段上传线程;分段上传线程每经过预设时间扫描S3存储服务中的附加池中的数据,并获取扫描到的数据没有进行断点续传的持续时间;将获取到的持续时间与时间阈值进行比较;响应于获取到的持续时间大于时间阈值,对扫描到的数据进行垃圾清理。通过使用本发明的方案,能够节省存储空间,提升产品的易用性,给用户带来方便和良好的体验,能够丰富分布式存储的产品功能,提高分布式存储产品的市场竞争力。

    一种数据聚合方法、装置、设备及计算机可读存储介质

    公开(公告)号:CN113778329A

    公开(公告)日:2021-12-10

    申请号:CN202110744253.X

    申请日:2021-06-30

    Abstract: 本发明公开了一种数据聚合方法、装置、设备及计算机可读存储介质,在多版本功能开启的情况下,本申请中的数据聚合方法对于接收到的存储容量小于预设阈值的目标数据,可以在将其本体数据聚合至对应的聚合数据的基础上,将该目标数据的版本号以及该目标数据的本体数据在聚合数据中的位置打包放在聚合数据的位图信息中,并且在目标数据的元数据中添加了聚合数据的身份信息,即使存在重名的目标数据,由于每个目标数据的版本号的唯一性,用户也可以根据目标数据的版本号快捷准确地找到目标数据中本体数据的具体位置,也即本申请可以识别不同版本号的重名目标数据,从而不再对重名数据进行覆盖存储,降低了数据丢失的风险,提升了用户体验。

Patent Agency Ranking