-
公开(公告)号:CN110737924B
公开(公告)日:2021-07-27
申请号:CN201810803843.3
申请日:2018-07-20
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本发明公开了一种数据保护的方法和设备,用以解决现有技术中故障域发生故障后,分布式存储集群的性能降低,影响业务运行的问题。在本发明实施例中,分布式存储集群会对未发生故障的故障域中的硬盘进行重新划分得到至少一个新故障域,以及根据初始数据分片分布规则在所述新故障域中重新选定数据分片分布的硬盘,并在重新选定的硬盘中进行恢复与重均衡。由于本发明实施例中在故障域发生故障后,分布式存储集群会及时对中未发生故障的故障域中的硬盘进行重新划分得到新故障域,之后还会将丢失数据基于重新划分的故障域恢复,降低了因故障域发生故障而无法及时处理导致性能降低,业务的无法正常运行的概率。
-
公开(公告)号:CN112583760B
公开(公告)日:2022-05-31
申请号:CN201910923474.6
申请日:2019-09-27
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: H04L9/40 , H04L67/1042 , H04L67/1097
Abstract: 本发明实施例公开了一种对象存储的访问方法、装置、设备和计算机存储介质,该方法包括:获取对象存储的存储集群的访问请求;对所述访问请求进行解析,得到解析结果,所述解析结果至少用于指示需要访问的存储集群;基于所述对象存储网关节点与对象存储的各存储集群的预先建立的连接、以及所述解析结果,将所述访问请求转发至所述需要访问的存储集群。如此,在根据访问请求的解析结果确定需要访问的存储集群时,可以将访问请求发送给对应的存储集群,进而,可以实现通过统一入口来访问多个存储集群,从而构造EB级别的对象存储集群。
-
公开(公告)号:CN110392078A
公开(公告)日:2019-10-29
申请号:CN201810358650.1
申请日:2018-04-20
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本发明公开了一种维护共享文件的底层资源数据的方法和设备,用以解决现有技术中共享驱动节点无法主动地维护共享文件的底层资源数据的问题。本发明中,共享驱动节点获取共享文件的第一底层资源数据和共享文件的业务数据,再将由业务数据整体转化得到的第二底层资源数据和第一底层资源数据进行比对,如果第一底层资源数据与第二底层资源数据不同,则用第二底层资源数据进行替换。如此,在第一底层资源数据出现错误后,共享驱动节点可以主动地发现第一底层资源数据的异常并进行数据恢复,与现有技术中系统维护人员根据用户反馈进行人工修正相比,本发明实施例中共享驱动节点能够主动发现第一底层资源数据异常并修复,极大的提高了修复的效率。
-
公开(公告)号:CN116781592A
公开(公告)日:2023-09-19
申请号:CN202310096375.1
申请日:2023-02-10
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: H04L43/55 , H04L43/0888 , H04L43/0852 , H04L43/0876 , H04L43/0823
Abstract: 本公开提供了一种对象存储服务方法及云平台、存储介质,所述方法应用于云平台中,包括:通过所述云平台的控制节点获取对象存储服务的全链路访问日志;其中,所述全链路访问日志中包括所述链路所覆盖的各层级的服务节点的访问日志;通过所述控制节点根据各层级的服务节点的访问日志,确定每个层级对应的服务指标数据;通过所述云平台的监控节点根据各层级的服务指标数据,确定服务不达标的层级;通过所述云平台的调度节点对所述不达标的层级的对象存储服务任务进行调度。通过上述方法,可以快速定位服务不达标的层级,以执行该层级的调度任务。
-
公开(公告)号:CN114968069A
公开(公告)日:2022-08-30
申请号:CN202110220134.4
申请日:2021-02-26
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本发明提供一种数据存储方法、装置、电子设备和计算机存储介质,所述方法包括:获取存储桶中的每个对象;所述存储桶位于对象存储网关RGW中;获取所述每个对象的索引数据;所述索引数据包括所述每个对象的分片编号;基于所述每个对象的分片编号,对数据库中的表进行划分,得到至少一个分区;所述每个分区用于存储相同分片编号的对象所对应的索引数据;将所述每个分区中不同对象的索引数据按照条目存储于所述数据库中;每个条目用于存储一个对象的索引数据;由于该方法支持对索引数据的部分修复且修复的粒度是单个对象级别的修复,进而,能够有效降低用户在读写对象的索引数据时发生IO阻塞的可能性,提高读写性能。
-
公开(公告)号:CN113760840A
公开(公告)日:2021-12-07
申请号:CN202010486788.7
申请日:2020-06-01
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: G06F16/176 , G06F16/182 , G06F21/60 , G06F9/50
Abstract: 本申请公开了一种数据处理方法,该方法包括:检测到第一数据请求时,获取第一数值;其中,第一数值,用于表示为第一节点设置的数据处理速度;第一节点,用于表示与第一数据请求对应的用于实现对象数据存储的节点;当检测到对象数据开始传输时,控制第二节点基于第一数值,对第一节点的对象数据的处理速度进行管理;第二节点,用于表示对对象数据的处理速度进行管理的节点。本申请还公开了一种数据处理系统、设备和计算机可读存储介质。本申请所提供的数据处理方法,解决了相关技术中Ceph系统的对象网关(Rados Gateway,RGW)无法管理对象数据处理速度的问题,缓解了Ceph系统中用户的对象数据请求可能被阻塞的情况。
-
公开(公告)号:CN110392078B
公开(公告)日:2021-08-13
申请号:CN201810358650.1
申请日:2018-04-20
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本发明公开了一种维护共享文件的底层资源数据的方法和设备,用以解决现有技术中共享驱动节点无法主动地维护共享文件的底层资源数据的问题。本发明中,共享驱动节点获取共享文件的第一底层资源数据和共享文件的业务数据,再将由业务数据整体转化得到的第二底层资源数据和第一底层资源数据进行比对,如果第一底层资源数据与第二底层资源数据不同,则用第二底层资源数据进行替换。如此,在第一底层资源数据出现错误后,共享驱动节点可以主动地发现第一底层资源数据的异常并进行数据恢复,与现有技术中系统维护人员根据用户反馈进行人工修正相比,本发明实施例中共享驱动节点能够主动发现第一底层资源数据异常并修复,极大的提高了修复的效率。
-
公开(公告)号:CN110737924A
公开(公告)日:2020-01-31
申请号:CN201810803843.3
申请日:2018-07-20
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本发明公开了一种数据保护的方法和设备,用以解决现有技术中故障域发生故障后,分布式存储集群的性能降低,影响业务运行的问题。在本发明实施例中,分布式存储集群会对未发生故障的故障域中的硬盘进行重新划分得到至少一个新故障域,以及根据初始数据分片分布规则在所述新故障域中重新选定数据分片分布的硬盘,并在重新选定的硬盘中进行恢复与重均衡。由于本发明实施例中在故障域发生故障后,分布式存储集群会及时对中未发生故障的故障域中的硬盘进行重新划分得到新故障域,之后还会将丢失数据基于重新划分的故障域恢复,降低了因故障域发生故障而无法及时处理导致性能降低,业务的无法正常运行的概率。
-
公开(公告)号:CN113760840B
公开(公告)日:2024-05-07
申请号:CN202010486788.7
申请日:2020-06-01
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
IPC: G06F16/176 , G06F16/182 , G06F21/60 , G06F9/50
Abstract: 本申请公开了一种数据处理方法,该方法包括:检测到第一数据请求时,获取第一数值;其中,第一数值,用于表示为第一节点设置的数据处理速度;第一节点,用于表示与第一数据请求对应的用于实现对象数据存储的节点;当检测到对象数据开始传输时,控制第二节点基于第一数值,对第一节点的对象数据的处理速度进行管理;第二节点,用于表示对对象数据的处理速度进行管理的节点。本申请还公开了一种数据处理系统、设备和计算机可读存储介质。本申请所提供的数据处理方法,解决了相关技术中Ceph系统的对象网关(Rados Gateway,RGW)无法管理对象数据处理速度的问题,缓解了Ceph系统中用户的对象数据请求可能被阻塞的情况。
-
公开(公告)号:CN113971088A
公开(公告)日:2022-01-25
申请号:CN202010722377.3
申请日:2020-07-24
Applicant: 中移(苏州)软件技术有限公司 , 中国移动通信集团有限公司
Abstract: 本申请实施例提供了一种预约方法、装置、电子设备、存储介质及系统,该方法应用于服务器管理系统,包括:接收预约用户的资源查询请求;基于所述资源查询请求,向所述预约用户返回服务器资源信息;接收所述预约用户的预约请求;判断所述预约服务器在所述预约时段内是否处于未预约状态;当所述预约服务器在所述预约时段内处于未预约状态时,将所述预约服务器在所述预约时段内的使用权限分配给所述预约用户。这样,能够实现服务器的自助预约以及线上预约,提高服务器的利用率,避免人工分配过程中服务器资源的浪费。
-
-
-
-
-
-
-
-
-