一种分级缓存数据转移的方法、装置、设备及介质

    公开(公告)号:CN116303139A

    公开(公告)日:2023-06-23

    申请号:CN202310142402.4

    申请日:2023-02-17

    Abstract: 本发明提供了一种分级缓存数据转移的方法、装置、设备及可读介质,方法包括:在桶中开启分级缓存,并统计待往桶中上传对象的访问频率,并将访问频率高于频率阈值的上传对象的上传请求进行标记;响应于接收到客户端上传对象的请求,判断请求中的上传对象是否满足要求;响应于请求中的上传对象的大小小于尺寸阈值且请求中有标记,将上传对象写入缓存池中;创建转移线程并设定转移时间,并在到达转移时间时将缓存池中的数据转移到普通数据池中。通过使用本发明的方案,能够提高高访问频率对象的访问效率,能够及时清理缓存池中低访问频率对象占用的空间,降低大量缓存数据转移带给前端业务的影响,极大地提高了存储系统的市场竞争力。

    一种垃圾对象删除的方法、装置及介质

    公开(公告)号:CN115203190A

    公开(公告)日:2022-10-18

    申请号:CN202210911746.2

    申请日:2022-07-27

    Inventor: 陶桐桐 何文龙

    Abstract: 本申请公开了一种垃圾对象删除的方法、装置及介质,涉及数据处理领域,针对大对象的删除效率低的问题,通过删除所述待删除对象的索引信息;将所述对象删除任务中包含的待删除对象的头对象信息和条带对象信息记录进GC流程;启动所述GC流程。先删除待删除对象的索引信息,使得用户不能再通过索引信息检索到待删除对象。之后再删除待删除对象的头对象信息和条带对象信息,由于GC流程中保存的头对象信息和条带对象信息是一个完整的对象数据,较原有流程中的根据一个或多个条带对象的位置信息在GC流程中对条带对象信息进行删除处理,减少了元数据的字节数,提高了数据处理的效率,也提高了用户端感知到的删除对象任务的完成速度。

    一种分布式对象存储系统的桶索引存储方法、装置及介质

    公开(公告)号:CN115129789A

    公开(公告)日:2022-09-30

    申请号:CN202210890257.3

    申请日:2022-07-27

    Inventor: 何文龙 赵煜

    Abstract: 本申请公开了一种分布式对象存储系统的桶索引存储方法、装置及介质,涉及存储技术领域,使得单桶可以保存更多的对象数,不受原始分片数限制,接收客户端发送的上传对象,将上传对象的数据部分存储至数据池,确定上传对象的索引元数据保存至桶索引的目标分片,判断目标分片的已存储数据是否达到目标阈值,若是,控制目标分片分裂成预设分片数的子分片,确定上传对象的索引元数据保存至桶索引的目标子分片,将索引元数据记录至目标子分片。当目标分片的已存储数据达到目标阈值时,控制其进行分裂,以将索引元数据存储至分裂出的新分片上,使得单桶可以保存更多的对象数,不受原始分片数限制。

    一种数据存取方法、装置、设备和计算机可读存储介质

    公开(公告)号:CN114968937A

    公开(公告)日:2022-08-30

    申请号:CN202210606662.8

    申请日:2022-05-31

    Inventor: 何文龙 武模仁

    Abstract: 本申请实施例公开了一种数据存取方法、装置、设备和计算机可读存储介质,获取到客户端传输的分段上传请求时,创建文件夹,按照设定的文件夹命名方式以及分段上传请求中携带的对象名,设置文件夹的名称。依据分段上传请求中携带的分段数据和分段号,在文件夹下建立用于存储各分段数据的分段文件,各分段文件依据对应的分段号命名。在所有分段数据上传成功后,创建对象文件,在对象文件中记录用于表征文件类型以及各分段文件存储位置的元数据。通过创建文件夹,可以将分段数据以分段文件的形式存储在该文件夹下,通过创建记录分段文件存储位置的对象文件,可以支持分段数据的后续调取,解决了S3和NAS的融合互通存储系统不支持分段上传的问题。

Patent Agency Ranking