-
公开(公告)号:CN116841453A
公开(公告)日:2023-10-03
申请号:CN202210305712.9
申请日:2022-03-25
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本发明实施例公开了一种数据回收方法、系统、装置及计算机可读存储介质,方法包括:在当前调度周期内,获取存储单元集群中存储单元的使用信息;使用信息包括回收状态与历史回收时间;基于回收状态,确定存储单元集群中不处于数据回收状态的至少一个第一存储单元;在回收状态表征处于数据回收状态的情况下,将回收状态对应的存储单元确定为第二存储单元;基于历史回收时间,从至少一个第一存储单元中确定目标存储单元;停止目标存储单元的数据处理服务,通过目标存储单元执行数据回收操作,并更新目标存储单元的回收状态;停止第二存储单元的数据回收操作,并恢复第二存储单元的数据处理服务。通过本方案,能够提升垃圾回收效率与存储集群性能。
-
公开(公告)号:CN112583760B
公开(公告)日:2022-05-31
申请号:CN201910923474.6
申请日:2019-09-27
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: H04L9/40 , H04L67/1042 , H04L67/1097
Abstract: 本发明实施例公开了一种对象存储的访问方法、装置、设备和计算机存储介质,该方法包括:获取对象存储的存储集群的访问请求;对所述访问请求进行解析,得到解析结果,所述解析结果至少用于指示需要访问的存储集群;基于所述对象存储网关节点与对象存储的各存储集群的预先建立的连接、以及所述解析结果,将所述访问请求转发至所述需要访问的存储集群。如此,在根据访问请求的解析结果确定需要访问的存储集群时,可以将访问请求发送给对应的存储集群,进而,可以实现通过统一入口来访问多个存储集群,从而构造EB级别的对象存储集群。
-
公开(公告)号:CN113271323B
公开(公告)日:2022-07-01
申请号:CN202010092958.3
申请日:2020-02-14
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: H04L67/1097 , H04L67/10 , H04L67/1001
Abstract: 本发明公开了一种集群扩容方法、装置和存储介质,方法包括:确定针对Ceph集群的第一数据分布图;确定目标节点的参数,基于所述目标节点的参数和所述第一数据分布图,生成第二数据分布图;所述目标节点表征待加入所述Ceph集群的节点;根据所述第二数据分布图,规划数据均衡路线,基于所述数据均衡路线进行数据均衡;其中,所述数据均衡路线表征所述Ceph集群中针对OSD的数据迁移路线。本发明提供的方法以OSD为单位逐个进行数据迁移,从OSD的角度对迁移动作进行限制,对业务的影响降到最小,同时也加快了扩容过程。
-
公开(公告)号:CN113760840A
公开(公告)日:2021-12-07
申请号:CN202010486788.7
申请日:2020-06-01
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: G06F16/176 , G06F16/182 , G06F21/60 , G06F9/50
Abstract: 本申请公开了一种数据处理方法,该方法包括:检测到第一数据请求时,获取第一数值;其中,第一数值,用于表示为第一节点设置的数据处理速度;第一节点,用于表示与第一数据请求对应的用于实现对象数据存储的节点;当检测到对象数据开始传输时,控制第二节点基于第一数值,对第一节点的对象数据的处理速度进行管理;第二节点,用于表示对对象数据的处理速度进行管理的节点。本申请还公开了一种数据处理系统、设备和计算机可读存储介质。本申请所提供的数据处理方法,解决了相关技术中Ceph系统的对象网关(Rados Gateway,RGW)无法管理对象数据处理速度的问题,缓解了Ceph系统中用户的对象数据请求可能被阻塞的情况。
-
公开(公告)号:CN116263722A
公开(公告)日:2023-06-16
申请号:CN202211279600.7
申请日:2022-10-19
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: G06F11/07
Abstract: 本发明提供一种分布式系统的修复方法及装置,该修复方法包括:在上一轮对存储单元的寻找修复流程结束的情况下,获取集群中多个存储单元的使用信息;基于所获取的使用信息选择第一存储单元,并将所选择的第一存储单元从数据集群中移出;从所选择的第一存储单元中寻找需要修复的分片;基于寻找结果对所选择的第一存储单元进行修复。通过上述方式,本发明实施例能够提高修复效率,而将需要修复的存储单元暂时从集群移出来,可以避免对集群的影响,保证集群的性能。
-
公开(公告)号:CN113271323A
公开(公告)日:2021-08-17
申请号:CN202010092958.3
申请日:2020-02-14
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: H04L29/08
Abstract: 本发明公开了一种集群扩容方法、装置和存储介质,方法包括:确定针对Ceph集群的第一数据分布图;确定目标节点的参数,基于所述目标节点的参数和所述第一数据分布图,生成第二数据分布图;所述目标节点表征待加入所述Ceph集群的节点;根据所述第二数据分布图,规划数据均衡路线,基于所述数据均衡路线进行数据均衡;其中,所述数据均衡路线表征所述Ceph集群中针对OSD的数据迁移路线。本发明提供的方法以OSD为单位逐个进行数据迁移,从OSD的角度对迁移动作进行限制,对业务的影响降到最小,同时也加快了扩容过程。
-
公开(公告)号:CN113760840B
公开(公告)日:2024-05-07
申请号:CN202010486788.7
申请日:2020-06-01
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: G06F16/176 , G06F16/182 , G06F21/60 , G06F9/50
Abstract: 本申请公开了一种数据处理方法,该方法包括:检测到第一数据请求时,获取第一数值;其中,第一数值,用于表示为第一节点设置的数据处理速度;第一节点,用于表示与第一数据请求对应的用于实现对象数据存储的节点;当检测到对象数据开始传输时,控制第二节点基于第一数值,对第一节点的对象数据的处理速度进行管理;第二节点,用于表示对对象数据的处理速度进行管理的节点。本申请还公开了一种数据处理系统、设备和计算机可读存储介质。本申请所提供的数据处理方法,解决了相关技术中Ceph系统的对象网关(Rados Gateway,RGW)无法管理对象数据处理速度的问题,缓解了Ceph系统中用户的对象数据请求可能被阻塞的情况。
-
公开(公告)号:CN113051124A
公开(公告)日:2021-06-29
申请号:CN201911379517.5
申请日:2019-12-27
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本申请实施例公开了设备监控方法、装置、服务器及存储介质,方法包括:添加针对设备的性能监控项;基于所述性能监控项,获取所述设备的性能数据;基于所述设备的性能数据,确定所述设备的性能信息。如此,解决了如何监控集群中各个设备的性能信息的问题。
-
公开(公告)号:CN112583760A
公开(公告)日:2021-03-30
申请号:CN201910923474.6
申请日:2019-09-27
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本发明实施例公开了一种对象存储的访问方法、装置、设备和计算机存储介质,该方法包括:获取对象存储的存储集群的访问请求;对所述访问请求进行解析,得到解析结果,所述解析结果至少用于指示需要访问的存储集群;基于所述对象存储网关节点与对象存储的各存储集群的预先建立的连接、以及所述解析结果,将所述访问请求转发至所述需要访问的存储集群。如此,在根据访问请求的解析结果确定需要访问的存储集群时,可以将访问请求发送给对应的存储集群,进而,可以实现通过统一入口来访问多个存储集群,从而构造EB级别的对象存储集群。
-
-
-
-
-
-
-
-