-
公开(公告)号:CN113625952B
公开(公告)日:2024-08-23
申请号:CN202110741523.1
申请日:2021-06-30
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06 , G06F16/901
Abstract: 本发明公开了一种对象存储方法、装置、设备及存储介质,该方法包括:确定对象存储服务中当前需写入对象的存储桶为当前桶,需写入当前桶的对象为当前对象;将当前对象写入至当前桶中,将当前对象的元数据信息写入至当前桶的桶索引分片上,并将对当前对象进行写入的操作日志信息写入至、与写入当前对象元数据信息的桶索引分片相对应的桶索引日志分片中,以供基于相应的元数据信息及操作日志信息实现当前对象的同步;桶索引分片与桶索引日志分片是一一对应的。可见,本申请不再将对象的操作日志信息写入到对象对应的桶索引分片中,而是单独桶索引日志分片中,从而通过这种方式使得桶索引分片变小,有效提高了数据同步的速度。
-
公开(公告)号:CN113625959B
公开(公告)日:2023-12-29
申请号:CN202110745186.3
申请日:2021-06-30
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本申请公开了一种数据处理方法和装置,多个数据大小不超过第一阈值的元对象聚合得到第一条带对象,在存在元对象删除时,可以获取一级位图信息;根据所述一级位图信息确定二级位图信息,所述二级位图信息记录了第一条带对象中每个元对象的状态信息;根据所述二级位图信息中的状态信息,确定所述第一条带对象中每个元对象的有效性;根据每个元对象的有效性对所述第一条带对象进行处理。这样,便可以根据聚合后第一条带对象中每个元对象的有效性,对无效数据进行垃圾回收处理或碎片整理,以提高存储空间有效利用率,大大降低存储空间的浪费。
-
公开(公告)号:CN114968937A
公开(公告)日:2022-08-30
申请号:CN202210606662.8
申请日:2022-05-31
Applicant: 济南浪潮数据技术有限公司
IPC: G06F16/16 , G06F16/182
Abstract: 本申请实施例公开了一种数据存取方法、装置、设备和计算机可读存储介质,获取到客户端传输的分段上传请求时,创建文件夹,按照设定的文件夹命名方式以及分段上传请求中携带的对象名,设置文件夹的名称。依据分段上传请求中携带的分段数据和分段号,在文件夹下建立用于存储各分段数据的分段文件,各分段文件依据对应的分段号命名。在所有分段数据上传成功后,创建对象文件,在对象文件中记录用于表征文件类型以及各分段文件存储位置的元数据。通过创建文件夹,可以将分段数据以分段文件的形式存储在该文件夹下,通过创建记录分段文件存储位置的对象文件,可以支持分段数据的后续调取,解决了S3和NAS的融合互通存储系统不支持分段上传的问题。
-
公开(公告)号:CN116668471A
公开(公告)日:2023-08-29
申请号:CN202310782104.1
申请日:2023-06-29
Applicant: 济南浪潮数据技术有限公司
IPC: H04L67/1097 , H04L61/5007
Abstract: 本发明公开了一种多站点环境搭建方法、装置、交换机及服务器,涉及分布式对象存储技术领域,该方法应用于交换机,包括:获取预设交换机IP对应的多站点管理界面触发的主站点搭建指令;与主站点搭建指令对应的第一目标站点进行交互,将第一目标站点配置为领域中的主站点;其中,主站点的管理界面IP为预设交换机IP;根据获取的多站点管理界面触发的领域的从站点搭建指令,与第二目标站点进行交互,将各第二目标站点分别配置为领域中的从站点;本发明利用与各站点连接的交换机对外提供的预设交换机IP,仅通过一个预设交换机IP便可搭建起多站点环境,从而简化了多站点环境的搭建和后续管理的操作流程,节省了用户时间,提升了用户体验。
-
公开(公告)号:CN116643696A
公开(公告)日:2023-08-25
申请号:CN202310579424.7
申请日:2023-05-19
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本申请公开了一种对象存储系统的元数据管理方法、系统、设备及存储介质,应用于存储技术领域,包括:接收对象上传请求;根据对象上传请求,确定出待上传对象的对象数据,待上传对象的各项固有属性元数据,以及待上传对象的各项扩展属性元数据;将待上传对象的各项扩展属性元数据进行汇总,得到一条汇总元数据;执行写操作,以将待上传对象的对象数据,待上传对象的各项固有属性元数据以及汇总后得到的汇总元数据写入硬盘中。应用本申请的方案,有利于提高对象存储系统的对象读写性能。
-
公开(公告)号:CN116069258A
公开(公告)日:2023-05-05
申请号:CN202310139848.1
申请日:2023-02-17
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本发明提供了一种回收分段上传产生的垃圾的方法、装置、设备及可读介质,方法包括:响应于S3存储服务的对象网关启动,在S3存储服务中创建分段上传线程;分段上传线程每经过预设时间扫描S3存储服务中的附加池中的数据,并获取扫描到的数据没有进行断点续传的持续时间;将获取到的持续时间与时间阈值进行比较;响应于获取到的持续时间大于时间阈值,对扫描到的数据进行垃圾清理。通过使用本发明的方案,能够节省存储空间,提升产品的易用性,给用户带来方便和良好的体验,能够丰富分布式存储的产品功能,提高分布式存储产品的市场竞争力。
-
公开(公告)号:CN114996091A
公开(公告)日:2022-09-02
申请号:CN202210612277.4
申请日:2022-05-31
Applicant: 济南浪潮数据技术有限公司
IPC: G06F11/30
Abstract: 本申请公开了一种分布式对象存储系统数据监控方法、装置及其介质,涉及分布式对象存储技术领域,用于提供一种进行数据监控的实施方式,针对目前进行数据监控的方式对性能影响大的问题,提供了一种分布式对象存储系统数据监控方法,通过将请求信息先存储于缓存中,根据预设的监控需求,对请求信息中的部分数据进行统计,以获得数据监控信息,并将这些数据监控信息保存到存储池中,以在需要时进行调用。因此,无论是向存储系统中写入的数据量,还是在用户查询数据监控信息时从存储系统中读取的数据量,都要少于目前将请求信息全部的数据都存储到存储系统中的方式,且在请求信息包含的请求越多时,这部分差异越明显。
-
公开(公告)号:CN113419828B
公开(公告)日:2022-07-29
申请号:CN202110600500.9
申请日:2021-05-31
Applicant: 济南浪潮数据技术有限公司
IPC: G06F9/48
Abstract: 本发明公开一种对象存储的生命周期管理方法和系统,其中,对象存储的生命周期管理方法包括:在桶生命周期状态内关联多个桶分片生命周期子状态,其中,每个桶分片对应有至少一个RGW对象;当桶生命周期被执行时,根据所述桶分片生命周期子状态,以桶分片为粒度使用多个线程执行桶内所有桶分片生命周期。本发明的技术方案能解决现有技术中单线程处理桶生命周期,导致生命周期处理速度缓慢,难以满足用户需求的问题。
-
公开(公告)号:CN113778329A
公开(公告)日:2021-12-10
申请号:CN202110744253.X
申请日:2021-06-30
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本发明公开了一种数据聚合方法、装置、设备及计算机可读存储介质,在多版本功能开启的情况下,本申请中的数据聚合方法对于接收到的存储容量小于预设阈值的目标数据,可以在将其本体数据聚合至对应的聚合数据的基础上,将该目标数据的版本号以及该目标数据的本体数据在聚合数据中的位置打包放在聚合数据的位图信息中,并且在目标数据的元数据中添加了聚合数据的身份信息,即使存在重名的目标数据,由于每个目标数据的版本号的唯一性,用户也可以根据目标数据的版本号快捷准确地找到目标数据中本体数据的具体位置,也即本申请可以识别不同版本号的重名目标数据,从而不再对重名数据进行覆盖存储,降低了数据丢失的风险,提升了用户体验。
-
公开(公告)号:CN113625952A
公开(公告)日:2021-11-09
申请号:CN202110741523.1
申请日:2021-06-30
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06 , G06F16/901
Abstract: 本发明公开了一种对象存储方法、装置、设备及存储介质,该方法包括:确定对象存储服务中当前需写入对象的存储桶为当前桶,需写入当前桶的对象为当前对象;将当前对象写入至当前桶中,将当前对象的元数据信息写入至当前桶的桶索引分片上,并将对当前对象进行写入的操作日志信息写入至、与写入当前对象元数据信息的桶索引分片相对应的桶索引日志分片中,以供基于相应的元数据信息及操作日志信息实现当前对象的同步;桶索引分片与桶索引日志分片是一一对应的。可见,本申请不再将对象的操作日志信息写入到对象对应的桶索引分片中,而是单独桶索引日志分片中,从而通过这种方式使得桶索引分片变小,有效提高了数据同步的速度。
-
-
-
-
-
-
-
-
-