存储系统中的数据管理方法、装置、设备、介质及产品

    公开(公告)号:CN119690357A

    公开(公告)日:2025-03-25

    申请号:CN202510200151.X

    申请日:2025-02-24

    Abstract: 本发明公开了一种存储系统中的数据管理方法、装置、设备、介质及产品,应用于存储技术领域,可以对存储系统中的存储数据及其元数据进行更为合理有效地管理,进一步降低了存储系统的管理成本与管理难度,方法包括:确定待存储数据;其中,所述待存储数据包括目标数据和所述目标数据对应的目标元数据;根据预设划分比例和各所述目标元数据的访问频率,将各所述目标元数据划分为热元数据和冷元数据;将所述热元数据保存至高速存储池,并将所述热元数据对应的目标数据保存至低速存储池;将所述冷元数据和所述冷元数据对应的目标数据保存至所述低速存储池。

    一种分布式存储系统的对象管理方法、装置及设备和介质

    公开(公告)号:CN117609195A

    公开(公告)日:2024-02-27

    申请号:CN202410096503.7

    申请日:2024-01-24

    Abstract: 本申请公开了一种分布式存储系统的对象管理方法、装置及设备和介质,涉及计算机技术领域,该方法包括:根据对象归置组单元的时间参数和虚拟空间组的时间参数将多个对象归置组单元映射至多个虚拟空间组;当分布式存储系统扩展时,创建新的第一虚拟空间组,将扩展的存储设备映射至第一虚拟空间组;根据对象归置组单元的时间参数确定需要迁移的第一待迁移对象归置组单元,并将第一待迁移对象归置组单元迁移至第一虚拟空间组中扩展的存储设备。本申请降低了分布式存储系统扩展时的数据迁移量。

    一种数据访问方法、装置、分布式存储系统及设备和介质

    公开(公告)号:CN117591038A

    公开(公告)日:2024-02-23

    申请号:CN202410071339.4

    申请日:2024-01-18

    Abstract: 本申请公开了一种数据访问方法、装置、分布式存储系统及设备和介质,涉及计算机技术领域,该方法包括:当委派服务器接收到第一客户端对于目标文件的授权访问请求时,判断是否存在第二客户端具有对目标目录的访问权限;若是,则向第一客户端返回第二客户端的地址信息,以便第一客户端通过第二客户端对目标文件的进行读写;若否,则向第一客户端授权目标目录的访问权限;在第一客户端对目标目录的访问授权期间内,接收第一客户端对于目标文件的符合可移植操作系统接口语义的读写请求发送至转换设备,以便转换设备将符合可移植操作系统接口语义的读写请求转换为符合对象存储接口语义的读写请求,并通过分布式对象存储集群进行响应。

    一种元数据检索方法、装置及电子设备和存储介质

    公开(公告)号:CN117687970A

    公开(公告)日:2024-03-12

    申请号:CN202410146907.2

    申请日:2024-02-02

    Abstract: 本申请公开了一种元数据检索方法、装置及电子设备和存储介质,涉及计算机技术领域,应用于分布式存储系统中的元数据服务器,该方法包括:为元数据设置元数据标签,将元数据标签存储至索引数据库中;其中,元数据标签用于记录元数据的索引与存储元数据的数据块分区的对应关系;当接收到客户端对目标元数据的检索请求时,在索引数据库中检索目标元数据对应的目标元数据标签;基于目标元数据标签在元数据池中检索目标元数据,并基于检索结果响应客户端。本申请解决了需要外置元数据检索服务来满足元数据检索功能带来的数据一致性和扩展性问题,同时提高了元数据的检索效率。

    一种元数据检索方法、装置及电子设备和存储介质

    公开(公告)号:CN117687970B

    公开(公告)日:2024-07-02

    申请号:CN202410146907.2

    申请日:2024-02-02

    Abstract: 本申请公开了一种元数据检索方法、装置及电子设备和存储介质,涉及计算机技术领域,应用于分布式存储系统中的元数据服务器,该方法包括:为元数据设置元数据标签,将元数据标签存储至索引数据库中;其中,元数据标签用于记录元数据的索引与存储元数据的数据块分区的对应关系;当接收到客户端对目标元数据的检索请求时,在索引数据库中检索目标元数据对应的目标元数据标签;基于目标元数据标签在元数据池中检索目标元数据,并基于检索结果响应客户端。本申请解决了需要外置元数据检索服务来满足元数据检索功能带来的数据一致性和扩展性问题,同时提高了元数据的检索效率。

    一种分布式存储系统的对象管理方法、装置及设备和介质

    公开(公告)号:CN117609195B

    公开(公告)日:2024-06-18

    申请号:CN202410096503.7

    申请日:2024-01-24

    Abstract: 本申请公开了一种分布式存储系统的对象管理方法、装置及设备和介质,涉及计算机技术领域,该方法包括:根据对象归置组单元的时间参数和虚拟空间组的时间参数将多个对象归置组单元映射至多个虚拟空间组;当分布式存储系统扩展时,创建新的第一虚拟空间组,将扩展的存储设备映射至第一虚拟空间组;根据对象归置组单元的时间参数确定需要迁移的第一待迁移对象归置组单元,并将第一待迁移对象归置组单元迁移至第一虚拟空间组中扩展的存储设备。本申请降低了分布式存储系统扩展时的数据迁移量。

    分布式存储系统的容量均衡方法、设备、程序产品及介质

    公开(公告)号:CN119182776A

    公开(公告)日:2024-12-24

    申请号:CN202410853503.7

    申请日:2024-06-28

    Abstract: 本发明公开了一种分布式存储系统的容量均衡方法、设备、程序产品及介质,涉及分布式存储技术领域,该方法包括:在当前迭代次数未超过目标迭代次数时,根据各存储设备的容量使用率,确定待迁移存储设备;其中,容量使用率为各存储设备的已用空间与设备容量之商;确定待迁移存储设备中的待迁移分片组和待迁移分片组对应的目的存储设备;其中,目的存储设备的容量使用率低于待迁移存储设备的容量使用率;将待迁移分片组迁移到目的存储设备;可见,本发明能够通过迭代的方式进行容量均衡,使得每次迭代过程中能够将对象分片从容量使用率高的存储设备重新分配到容量使用率低的存储设备来实现容量均衡,同时不影响分布式一致性规则。

    一种数据访问方法、装置、分布式存储系统及设备和介质

    公开(公告)号:CN117591038B

    公开(公告)日:2024-06-11

    申请号:CN202410071339.4

    申请日:2024-01-18

    Abstract: 本申请公开了一种数据访问方法、装置、分布式存储系统及设备和介质,涉及计算机技术领域,该方法包括:当委派服务器接收到第一客户端对于目标文件的授权访问请求时,判断是否存在第二客户端具有对目标目录的访问权限;若是,则向第一客户端返回第二客户端的地址信息,以便第一客户端通过第二客户端对目标文件的进行读写;若否,则向第一客户端授权目标目录的访问权限;在第一客户端对目标目录的访问授权期间内,接收第一客户端对于目标文件的符合可移植操作系统接口语义的读写请求发送至转换设备,以便转换设备将符合可移植操作系统接口语义的读写请求转换为符合对象存储接口语义的读写请求,并通过分布式对象存储集群进行响应。

    一种分布式块存储卷迁移方法、装置及介质

    公开(公告)号:CN116521065A

    公开(公告)日:2023-08-01

    申请号:CN202310386861.7

    申请日:2023-04-07

    Inventor: 于凯强 李晓伟

    Abstract: 本申请公开了一种分布式块存储卷迁移方法、装置及介质,涉及分布式存储领域,提供一种在卷迁移时不需要长时间暂停业务的方法,接收卷迁移任务;根据卷迁移任务确定原卷与目标卷;将原卷的待迁移数据复制至目标卷;当原卷正在复制待迁移数据时,接收客户端发送的对原卷的写请求;将写请求重定向至目标卷,对目标卷进行写入。在原卷进行卷迁移的过程中,接收到写请求后,将写请求重定向至目标卷,并在目标卷对应的位置完成写入动作,不需要在卷迁移时断开客户端的业务,可以正常接收写请求,缩短用户暂停业务时间,写请求的数据可直接写入新的目标卷,提高空间利用率,满足大部分用户不想长时间暂停业务的需求,提升卷的使用率。

Patent Agency Ranking