-
公开(公告)号:CN119003233A
公开(公告)日:2024-11-22
申请号:CN202411197002.4
申请日:2024-08-29
Applicant: 济南浪潮数据技术有限公司
Abstract: 本发明公开一种磁盘故障扩散处理方法、装置及介质,涉及分布式存储系统技术领域,用于解决目前在进行慢盘检测时可能出现的故障扩散问题。本发明提供的一种磁盘故障扩散处理方法,通过定时对慢盘检出功能所检测出的故障盘进行健康检测;判断其是否为由板卡连接的其它故障盘所引起故障扩散的正常盘;若是,则通过存储系统的磁盘扩容功能,重新将该磁盘加入到磁盘拓扑中,并重启该磁盘的OSD服务,恢复其正常运行以提供存储功能。本方法可以有效地解决慢盘检出功能在检出单盘故障后的故障扩散问题,可以将状态正常却因故障扩散而被终止OSD服务、移除存储系统的磁盘重新恢复工作,避免故障扩散所带来的OSD服务宕机、客户数据丢失等严重问题。
-
公开(公告)号:CN118672518A
公开(公告)日:2024-09-20
申请号:CN202411162437.5
申请日:2024-08-23
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本发明公开一种分布式存储系统数据处理方法、程序产品、装置及介质,涉及分布式存储系统技术领域,用于实现分布式存储系统的数据处理,针对目前系统中由网卡性能上限所带来的性能瓶颈,提供一种分布式存储系统数据处理方法,通过在客户端中预先部署纠删码计算模块、订阅存储池中的数据分布map更新,实现将对业务数据的纠删码计算和分布计算过程从主节点上拉到客户端中实现。由客户端直接向存储节点下发相应的传输子任务,以省略其中客户端向主节点发送业务数据的流程,也即可以使网卡省去一次业务数据量的数据传输,从而减轻网卡负担,可以缓解由网卡上限所带来的分布式存储系统性能瓶颈。
-
公开(公告)号:CN113608692A
公开(公告)日:2021-11-05
申请号:CN202110840687.X
申请日:2021-07-25
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本发明公开了一种存储系统数据一致性验证方法,包括以下步骤:响应于接收到获取存储位置的指令,确定存储系统的引擎的类型;响应于引擎的类型为第一类型,根据指令中携带的对象的标识获取对象对应的元数据;基于元数据获取对象对应的逻辑地址和物理地址;将逻辑地址和物理地址返回发送指令的客户端以使客户端根据逻辑地址和物理地址直接在存储设备上获取对象对应的第一数据;通过存储系统读取对象对应的第二数据并将第一数据与第二数据进行对比,以对存储系统的数据一致性进行验证。本发明还公开了一种系统、计算机设备以及可读存储介质。本发明提出的方案能够快速定界不一致数据是写入硬盘时失败还是磁盘数据正确但在系统读取过程中出现错误。
-
公开(公告)号:CN119200997A
公开(公告)日:2024-12-27
申请号:CN202411352905.5
申请日:2024-09-26
Applicant: 济南浪潮数据技术有限公司
Abstract: 本申请涉及一种归置组分裂扩容方法、装置、计算机设备及存储介质。所述方法包括:获取集群运行信息,计算得到第一归置组数量;对所述第一归置组数量进行可行性评估,得到可行性评估结果;响应于所述可行性评估结果为可行,基于所述第一归置组数量,进行归置组分裂方案设计,得到归置组分裂方案;根据所述归置组分裂方案,创建若干新归置组;基于渐进式均衡方法,对所述若干新归置组进行均衡分布。采用本方法能够动态智能调整归置组数量,根据集群实际运行状态进行均衡调整,实现扩容后的资源合理分配,提升集群的扩展性和稳定性。
-
公开(公告)号:CN117294628A
公开(公告)日:2023-12-26
申请号:CN202311266957.6
申请日:2023-09-27
Applicant: 济南浪潮数据技术有限公司
IPC: H04L43/10 , H04L43/0811 , H04L41/06 , H04L67/1097
Abstract: 本发明涉及计算机科学与技术领域,公开了一种分布式存储系统的网口异常处理方法及设备。第一OSD可以在启动时,获取所述第一存储节点在所述第一网络中的网络地址,第一OSD根据所述网络地址调用所述第一存储节点的操作系统,确定物理网口并对所述物理网口的网口状态进行检测,当检测到所述物理网口的网口状态为异常状态时,第一OSD停止生成心跳消息,以及停止向所述第二OSD发送心跳消息。第一OSD可以在物理网口异常导致后端网络故障时,停止生成心跳消息,避免心跳消息对内存的占用,减少对内存使用量,有效保证存储系统稳定性。
-
公开(公告)号:CN113553001A
公开(公告)日:2021-10-26
申请号:CN202110652900.4
申请日:2021-06-11
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本发明提出了一种数据写入速率的自适应限流方法,应用于分布式存储系统中,包括:对多个IO实例进行数据写入控制;获取每个IO实例中待写入的数据写入请求;根据待写入的数据量判断当前第一周期内可写入的数据量进行对比,如果当前第一周期内可写入的数据量不小于待写入的数据量,控制待写入的数据写入,并更新当前第一周期内可写入的数据量;如果满足,根据第二周期内存在数据写入请求等待的第一周期的数量进行数据写入速率自适应调整,根据调整后的数据写入速率设置当前第一周期内可写入的数据量,本发明还提出了一种数据写入速率的自适应限流装置、设备及介质,有效的提高了数据写入速率限制的可靠性。
-
公开(公告)号:CN118672518B
公开(公告)日:2025-02-14
申请号:CN202411162437.5
申请日:2024-08-23
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本发明公开一种分布式存储系统数据处理方法、程序产品、装置及介质,涉及分布式存储系统技术领域,用于实现分布式存储系统的数据处理,针对目前系统中由网卡性能上限所带来的性能瓶颈,提供一种分布式存储系统数据处理方法,通过在客户端中预先部署纠删码计算模块、订阅存储池中的数据分布map更新,实现将对业务数据的纠删码计算和分布计算过程从主节点上拉到客户端中实现。由客户端直接向存储节点下发相应的传输子任务,以省略其中客户端向主节点发送业务数据的流程,也即可以使网卡省去一次业务数据量的数据传输,从而减轻网卡负担,可以缓解由网卡上限所带来的分布式存储系统性能瓶颈。
-
公开(公告)号:CN116346644A
公开(公告)日:2023-06-27
申请号:CN202310168229.5
申请日:2023-02-24
Applicant: 济南浪潮数据技术有限公司
Inventor: 张洪鑫
IPC: H04L41/50 , H04L67/51 , H04L67/1097
Abstract: 本发明公开了一种OSD服务的管理方法、系统及服务器,应用于控制领域,在接收到OSD服务的启动指令时,判断OSD服务是否为新启动的OSD服务;若是新启动的OSD服务,则将OSD服务的标识信息保存至OSD服务对应的硬盘中;向管理服务器中的MON服务发送启动信息,启动信息包括OSD服务的标识信息;在MON服务判定OSD服务为新启动的OSD服务时,控制述OSD服务启动。在OSD服务新建时将标识信息保存至OSD服务对应的硬盘中,同时将标识信息也发送至管理服务器的MON服务中,创建服务时进行多重管理检查确认,会避免OSD服务信息紊乱甚至导致数据丢失。
-
公开(公告)号:CN113608692B
公开(公告)日:2023-12-29
申请号:CN202110840687.X
申请日:2021-07-25
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本发明公开了一种存储系统数据一致性验证方法,包括以下步骤:响应于接收到获取存储位置的指令,确定存储系统的引擎的类型;响应于引擎的类型为第一类型,根据指令中携带的对象的标识获取对象对应的元数据;基于元数据获取对象对应的逻辑地址和物理地址;将逻辑地址和物理地址返回发送指令的客户端以使客户端根据逻辑地址和物理地址直接在存储设备上获取对象对应的第一数据;通过存储系统读取对象对应的第二数据并将第一数据与第二数据进行对比,以对存储系统的数据一致性进行验证。本发明还公开了一种系统、计算机设备以及可读存储介质。本发明提出的方案能够快速定界不一致数据是写入硬盘时失败还是磁盘数据正确但在系统读取过程中出现错误。
-
-
-
-
-
-
-
-