一种数据回收方法、系统、装置及计算机可读存储介质

    公开(公告)号:CN116841453A

    公开(公告)日:2023-10-03

    申请号:CN202210305712.9

    申请日:2022-03-25

    Abstract: 本发明实施例公开了一种数据回收方法、系统、装置及计算机可读存储介质,方法包括:在当前调度周期内,获取存储单元集群中存储单元的使用信息;使用信息包括回收状态与历史回收时间;基于回收状态,确定存储单元集群中不处于数据回收状态的至少一个第一存储单元;在回收状态表征处于数据回收状态的情况下,将回收状态对应的存储单元确定为第二存储单元;基于历史回收时间,从至少一个第一存储单元中确定目标存储单元;停止目标存储单元的数据处理服务,通过目标存储单元执行数据回收操作,并更新目标存储单元的回收状态;停止第二存储单元的数据回收操作,并恢复第二存储单元的数据处理服务。通过本方案,能够提升垃圾回收效率与存储集群性能。

    集群扩容方法、装置和存储介质

    公开(公告)号:CN113271323B

    公开(公告)日:2022-07-01

    申请号:CN202010092958.3

    申请日:2020-02-14

    Abstract: 本发明公开了一种集群扩容方法、装置和存储介质,方法包括:确定针对Ceph集群的第一数据分布图;确定目标节点的参数,基于所述目标节点的参数和所述第一数据分布图,生成第二数据分布图;所述目标节点表征待加入所述Ceph集群的节点;根据所述第二数据分布图,规划数据均衡路线,基于所述数据均衡路线进行数据均衡;其中,所述数据均衡路线表征所述Ceph集群中针对OSD的数据迁移路线。本发明提供的方法以OSD为单位逐个进行数据迁移,从OSD的角度对迁移动作进行限制,对业务的影响降到最小,同时也加快了扩容过程。

    一种数据处理方法、系统、设备及计算机存储介质

    公开(公告)号:CN113760840A

    公开(公告)日:2021-12-07

    申请号:CN202010486788.7

    申请日:2020-06-01

    Abstract: 本申请公开了一种数据处理方法,该方法包括:检测到第一数据请求时,获取第一数值;其中,第一数值,用于表示为第一节点设置的数据处理速度;第一节点,用于表示与第一数据请求对应的用于实现对象数据存储的节点;当检测到对象数据开始传输时,控制第二节点基于第一数值,对第一节点的对象数据的处理速度进行管理;第二节点,用于表示对对象数据的处理速度进行管理的节点。本申请还公开了一种数据处理系统、设备和计算机可读存储介质。本申请所提供的数据处理方法,解决了相关技术中Ceph系统的对象网关(Rados Gateway,RGW)无法管理对象数据处理速度的问题,缓解了Ceph系统中用户的对象数据请求可能被阻塞的情况。

    一种分布式系统的修复方法及装置

    公开(公告)号:CN116263722A

    公开(公告)日:2023-06-16

    申请号:CN202211279600.7

    申请日:2022-10-19

    Abstract: 本发明提供一种分布式系统的修复方法及装置,该修复方法包括:在上一轮对存储单元的寻找修复流程结束的情况下,获取集群中多个存储单元的使用信息;基于所获取的使用信息选择第一存储单元,并将所选择的第一存储单元从数据集群中移出;从所选择的第一存储单元中寻找需要修复的分片;基于寻找结果对所选择的第一存储单元进行修复。通过上述方式,本发明实施例能够提高修复效率,而将需要修复的存储单元暂时从集群移出来,可以避免对集群的影响,保证集群的性能。

    集群扩容方法、装置和存储介质

    公开(公告)号:CN113271323A

    公开(公告)日:2021-08-17

    申请号:CN202010092958.3

    申请日:2020-02-14

    Abstract: 本发明公开了一种集群扩容方法、装置和存储介质,方法包括:确定针对Ceph集群的第一数据分布图;确定目标节点的参数,基于所述目标节点的参数和所述第一数据分布图,生成第二数据分布图;所述目标节点表征待加入所述Ceph集群的节点;根据所述第二数据分布图,规划数据均衡路线,基于所述数据均衡路线进行数据均衡;其中,所述数据均衡路线表征所述Ceph集群中针对OSD的数据迁移路线。本发明提供的方法以OSD为单位逐个进行数据迁移,从OSD的角度对迁移动作进行限制,对业务的影响降到最小,同时也加快了扩容过程。

    一种数据处理方法、系统、设备及计算机存储介质

    公开(公告)号:CN113760840B

    公开(公告)日:2024-05-07

    申请号:CN202010486788.7

    申请日:2020-06-01

    Abstract: 本申请公开了一种数据处理方法,该方法包括:检测到第一数据请求时,获取第一数值;其中,第一数值,用于表示为第一节点设置的数据处理速度;第一节点,用于表示与第一数据请求对应的用于实现对象数据存储的节点;当检测到对象数据开始传输时,控制第二节点基于第一数值,对第一节点的对象数据的处理速度进行管理;第二节点,用于表示对对象数据的处理速度进行管理的节点。本申请还公开了一种数据处理系统、设备和计算机可读存储介质。本申请所提供的数据处理方法,解决了相关技术中Ceph系统的对象网关(Rados Gateway,RGW)无法管理对象数据处理速度的问题,缓解了Ceph系统中用户的对象数据请求可能被阻塞的情况。

Patent Agency Ranking