一种分布式文件系统的逆序读方法、系统及相关装置

    公开(公告)号:CN113609093A

    公开(公告)日:2021-11-05

    申请号:CN202110744220.5

    申请日:2021-06-30

    Abstract: 本申请提供一种分布式文件系统的逆序读方法,具体技术方案如下包括:接收逆序读请求;将上一次预读的开始位置作为触发位,设置预读偏移量进行4M对齐;根据对齐的预设偏移量计算预读文件大小,并根据所述预读文件大小重新计算预读偏移量,并确定预读开始位置和预读长度;根据所述预读开始位置和所述预读长度异步获取数据,并将数据加载到缓存。本申请能快速获取数据,提高带宽与并发量。通过实现逆序预读能够进一步实现逆序读的异步读取,有效提高CPU的使用效率,进一步提高读带宽与并发量。本申请还提供一种分布式文件系统的逆序读系统、计算机可读存储介质和电子设备,具有上述有益效果。

    RBD虚拟机的批量升级方法、系统、装置及可读存储介质

    公开(公告)号:CN113467814A

    公开(公告)日:2021-10-01

    申请号:CN202110597893.2

    申请日:2021-05-31

    Inventor: 刘天祥 胡永刚

    Abstract: 本发明提出的一种RBD虚拟机的批量升级方法、系统、装置及可读存储介质,包括:在RBD虚拟机内建立定时器,并通过定时器设定RBD虚拟机读取监控器发送的心跳信息的时间间隔;读取心跳消息,通过解析心跳消息确定RBD虚拟机是否需要升级动态库;若需要升级动态库,管理员通过管理界面向监控器导入计算节点的IP列表,向监控器发送升级命令,并控制监控器根据IP列表依次向计算节点发送包含动态库最新版本信息的心跳消息。本发明简化了RBD虚拟机的升级操作,不需要去重启所有计算节点上的所有虚拟机来完成升级,实现了RBD虚拟机的自动批量升级。

    一种RBD访问存储集群的方法、系统、介质及设备

    公开(公告)号:CN113419673A

    公开(公告)日:2021-09-21

    申请号:CN202110627983.1

    申请日:2021-06-05

    Inventor: 彭泽 胡永刚

    Abstract: 本发明提供了一种RBD访问存储集群的方法、系统、介质及设备,方法包括:响应于RBD层初次接收到访问存储集群的请求,在RBD层建立RBD客户端且将其实例化,并将实例化的RBD客户端连接到存储集群以对其进行访问;在链表中存放RBD客户端对应的指针以及该指针的计数,并将该指针的计数加一;响应于RBD层再次接收到访问存储集群的请求,查询该指针的计数;响应于该指针的计数小于预设阈值,通过该指针指向RBD客户端以使其直接对存储集群进行访问,并将该指针的计数加一。本发明通过多个请求通过一个RBD客户端共用相同的连接资源,既减少了RBD客户端本身的资源消耗,同时减少了对宿主机系统资源的消耗,进而提升了存储业务的稳定性,实现了高效存储。

    一种存储容量管理方法、系统及存储介质

    公开(公告)号:CN113419672A

    公开(公告)日:2021-09-21

    申请号:CN202110625894.3

    申请日:2021-06-04

    Inventor: 杨鸿洁 胡永刚

    Abstract: 本发明提供了一种存储容量管理方法、系统及存储介质,方法包括:将存储池中的存储卷与快照的可分配存储容量之和作为总分配容量,并基于存储池的总存储容量为总分配容量设置上限;响应于对存储卷和/或快照进行相应操作,获取存储池中存储卷和快照的已用存储容量,并基于相应操作通过已用存储容量以及该上限计算存储卷和/或快照的预分配存储容量;基于预分配存储容量进行存储容量管理。本发明通过对存储卷、快照进行相应操作,并基于相应操作按照预设规则计算存储卷、快照的预分配容量,可合理地预估每次操作时存储卷或快照的最大预分配存储容量,避免了数据写入时存储容量不够的情况,有利于提高存储集群系统的数据存储的可靠性和易用性。

    一种多协议数据共享架构
    15.
    发明公开

    公开(公告)号:CN110781152A

    公开(公告)日:2020-02-11

    申请号:CN201910954198.X

    申请日:2019-10-09

    Abstract: 本申请公开了一种多协议数据共享架构,包括文件存储应用、对象存储应用、文件存储元数据池、对象存储元数据池及文件存储数据池;其中:文件存储数据池用于以文件协议的方式存储共享数据;文件存储元数据池用于以文件协议的方式存储共享数据对应的元数据;对象存储元数据池用于以对象协议的方式存储共享数据对应的元数据;文件存储应用用于采用文件协议访问文件存储元数据池及文件存储数据池;对象存储应用用于采用对象协议访问对象存储元数据池,以及用于利用自身接口转换得到的文件协议访问接口访问文件存储数据池。本申请仅需进行接口转换即可实现对象协议及文件协议的数据共享,有效避免了因数据格式转换存在的效率问题及存储空间占用问题。

    一种聚合多版本小对象的方法、装置及设备

    公开(公告)号:CN113821166B

    公开(公告)日:2024-09-20

    申请号:CN202110962671.6

    申请日:2021-08-20

    Abstract: 本申请公开了一种聚合多版本小对象的方法、装置及设备,该方法包括:首先获取待聚合的至少一个目标多版本小对象,然后,对至少一个目标多版本小对象进行标记,并将标记记录到存储池中,接着,当获取到的目标多版本小对象的数量达到预设数量时,根据标记对目标多版本小对象进行聚合,并将得到的大对象进行存储;或者,当根据标记对目标多版本小对象进行聚合得到的大对象达到预设数值时,停止进行聚合,并将得到的大对象进行存储。从而能够减少分布式对象存储系统中小对象的存储数量,提高重构速度和兼容性,进而提高系统的存储速度。

    基于共享锁的多路径存储方法、系统、终端及存储介质

    公开(公告)号:CN113467960B

    公开(公告)日:2024-02-27

    申请号:CN202110591750.0

    申请日:2021-05-28

    Inventor: 刘伟锋 胡永刚

    Abstract: 本发明提供一种基于共享锁的多路径存储方法、系统、终端及存储介质,包括:将多个客户端分为多个访问组;接收申请客户端发送的抢锁请求,判断所述申请客户端与卷排它锁的持有客户端是否同组:若是,则向所述申请客户端发送持有所述卷的排它锁的提示,并授予所述申请客户端对所述卷的写权限;若否,则向所述申请客户端发送申请未通过的提示。本发明降低了抢占排它锁的客户端数量,避免了多个客户端不断发生排它锁持有申请,大大减少抢锁带来的资源消耗,成倍提升卷的IO性能,并且不影响基于排它锁的对象映射特性。

    分布式存储服务端QoS优化方法、系统、终端及存储介质

    公开(公告)号:CN113687780B

    公开(公告)日:2024-02-23

    申请号:CN202110872204.4

    申请日:2021-07-30

    Abstract: 本发明提供一种分布式存储服务端QoS优化方法、系统、终端及存储介质,包括:预先设置服务质量模板的各参数项的取值范围;利用随机算法根据各参数项的取值范围生成多目标优化算法的初始种群;预先构建基于服务质量模板的参数项取值的客户端请求处理速度目标函数和内部请求处理速度目标函数;利用客户端请求处理速度目标函数和内部请求处理速度目标函数计算种群适应度;按非支配排序方法选择适应度高的种群进行优化迭代,得到服务质量模板的参数项取值最优方案集。本发明可有效处理调度服务器内外的I/O请求,得到最优的配置参数,使用者可根据这些最优解集以及自己的实际需要来配置QoS模板参数,从而提高集群的服务质量。

    一种桶生命周期配置方法、装置、设备及介质

    公开(公告)号:CN113625951B

    公开(公告)日:2023-12-26

    申请号:CN202110741509.1

    申请日:2021-06-30

    Abstract: 本申请公开了一种桶生命周期配置方法、装置、设备及介质,包括:确定桶生命周期的配置参数的可行域;基于所述可行域,利用预设多目标优化算法以第一优化目标和第二优化目标确定最优配置参数集;其中,所述第一优化目标为基于配置参数处理过期数据之后剩余过期数据相对于总过期数据的空间占比;所述第二优化目标为基于配置参数处理过期数据对应的集群性能占用率;从所述最优配置参数集中确定出目标配置参数,利用所述目标配置参数配置桶生命周期。这样,能够兼顾桶生命周期效果以及其他业务处理,从而提升系统性能。

    一种分布式文件系统的并行性能评估方法和装置

    公开(公告)号:CN113626299B

    公开(公告)日:2023-12-22

    申请号:CN202110835163.1

    申请日:2021-07-23

    Abstract: 本发明公开一种分布式文件系统的并行性能评估方法和装置,其中,该分布式文件系统的并行性能评估方法包括:当侦测到分布式文件系统的文件操作时,获取每种文件操作类型对应的IO并行数量信息;根据文件操作类型对应的唯一标识,统计每种文件操作类型对应的IO运行时间信息;根据IO并行数量信息和IO运行时间信息,评估分布式文件系统的并行性能。本发明的技术方案能解决现有技术中分布式文件系统的并行性能检测误差较大的问题。

Patent Agency Ranking