一种缓存聚合性能预测的方法、装置、设备及介质

    公开(公告)号:CN116089192A

    公开(公告)日:2023-05-09

    申请号:CN202310111291.0

    申请日:2023-02-10

    Inventor: 王铂 陶桐桐

    Abstract: 本发明提供了一种缓存聚合性能预测的方法、装置、设备及可读介质,方法包括:收集对象存储的预设参数,并采集预设参数对应的性能数据;将收集的预设参数作为输入参数,将性能数据作为输出以构建ELM模型;使用预设的验证方法验证构建的ELM模型是否符合要求;响应于构建的ELM模型符合要求,将ELM模型加入集群中进行缓存聚合性能的预测。通过使用本发明的方案,能够根据集群的配置参数来预测缓存聚合功能所占用的集群性能,能够方便业务人员对缓存聚合功能进行优化以及故障的检测。

    一种生命周期组件的构建方法、系统、设备及存储介质

    公开(公告)号:CN115292195A

    公开(公告)日:2022-11-04

    申请号:CN202211032515.0

    申请日:2022-08-26

    Inventor: 王铂 陶桐桐

    Abstract: 本申请公开了一种生命周期组件的构建方法、系统、设备及存储介质,应用于存储技术领域,包括:构建初始预测模型并进行训练,得到训练完成的用于预测生命周期组件的性能的性能预测模型;将各组待预测的生命周期组件参数依次输入至性能预测模型,得到对应于各组生命周期组件参数的性能预测结果;从各组待预测的生命周期组件参数中选择组件设置指令所指定的1组参数,并基于所选择的参数在对象存储集群的第一目标桶中进行生命周期组件的构建。应用本申请的方案,可以有效地进行生命周期组件的构建,且有利于提高工作人员的工作效率。

    垃圾数据删除性能预测方法、装置、设备、存储介质

    公开(公告)号:CN114996254A

    公开(公告)日:2022-09-02

    申请号:CN202210653565.4

    申请日:2022-06-10

    Inventor: 王铂 陶桐桐

    Abstract: 本申请公开了一种垃圾数据删除性能预测方法、装置、设备、存储介质,涉及计算机技术领域,包括:采集对象存储中的输入参数对应的性能数据,作为采样数据;利用采样数据对原始极限学习机模型进行训练,得到训练后的极限学习机模型;利用训练后的极限学习机模型对对象存储集群中的数据进行垃圾数据删除速度的性能预测。通过使用极限学习机为原始极限学习机模型,利用对象存储中的性能数据作为采样数据,训练一个能够对垃圾数据准确预测的极限学习机模型,通过配置参数来对垃圾数据删除性能预测的性能进行预测,利用训练后的极限学习机模型对对象存储中的桶级别的数据进行预测,对垃圾数据的删除速度进行预测,实现桶级别的垃圾数据删除速度的预测。

    一种对象存储的配额功能优化方法及系统

    公开(公告)号:CN113806081B

    公开(公告)日:2024-02-13

    申请号:CN202111017855.1

    申请日:2021-08-31

    Inventor: 王铂 陶桐桐

    Abstract: 本发明提供了一种对象存储的配额功能优化方法及系统,所述优化方法包括接收客户端的数据上传请求;获取预设的存储配额信息,根据所述配额信息确定配额缓存参数,并将集群的使用信息读取到缓存中;根据所述配额缓存参数,判断当前上传数据是否超出配额,若能上传,在上传完成后,更新缓存中的集群使用信息。根据使用者设置的配额值来确定存储桶配额阈值和存储桶配额缓存信任时间,使用不同的参数值,在配额大的时候,增大配额阈值,以及信任时间,可以让集群能够更加长的时间使用缓存的数据,以及在即将达到配额的过程中,能够更加精确的限制上传,提高存储性能。

    一种存储系统的对象上传方法、系统、设备及存储介质

    公开(公告)号:CN115185951A

    公开(公告)日:2022-10-14

    申请号:CN202210905689.7

    申请日:2022-07-29

    Abstract: 本申请公开了一种存储系统的对象上传方法、系统、设备及存储介质,应用于存储技术领域。包括:为存储系统中的桶设置桶的多级索引目录,并为各级目录结构下的各个桶分片设置对应于桶分片的虚拟桶分片;确定出目标桶,基于待上传对象的对象名确定出待上传对象在目标桶下的目录结构;将待上传对象的目录结构转换为校验值并映射至预设的数值空间中,得到对应于校验值的第一数值;确定出在待上传对象的目录结构下,数值空间中与第一数值距离最近的虚拟桶分片的编号,将待上传对象的对象信息写入至对应于该虚拟桶分片的桶分片中。应用本申请的方案,有效地提高单桶存放对象的规格,且保障有序列举的耗时较低。并且保证了存储的均衡。

    一种桶生命周期配置方法、装置、设备及介质

    公开(公告)号:CN113625951A

    公开(公告)日:2021-11-09

    申请号:CN202110741509.1

    申请日:2021-06-30

    Abstract: 本申请公开了一种桶生命周期配置方法、装置、设备及介质,包括:确定桶生命周期的配置参数的可行域;基于所述可行域,利用预设多目标优化算法以第一优化目标和第二优化目标确定最优配置参数集;其中,所述第一优化目标为基于配置参数处理过期数据之后剩余过期数据相对于总过期数据的空间占比;所述第二优化目标为基于配置参数处理过期数据对应的集群性能占用率;从所述最优配置参数集中确定出目标配置参数,利用所述目标配置参数配置桶生命周期。这样,能够兼顾桶生命周期效果以及其他业务处理,从而提升系统性能。

    一种优化列举用户量的方法、系统、设备和存储介质

    公开(公告)号:CN116909480A

    公开(公告)日:2023-10-20

    申请号:CN202310900108.5

    申请日:2023-07-21

    Inventor: 王铂

    Abstract: 本发明提供一种优化列举用户量的方法、系统、设备和存储介质,方法包括:部署对象存储集群和融合存储集群,分别在对象存储集群和融合存储集群的存储池中创建多个索引对象,并建立用户与索引对象的关联关系;响应于对用户进行操作,通过关联关系确定用户的索引对象,并执行对应的操作;响应于操作执行完成,更新所述索引对象对应的用户数量;以及响应于进行用户列举,遍历索引对象上的记录获取符合条件的用户,并更新满足条件的用户数量。本发明可在用户量很大,或者存储池内数据量很大场景下,有效解决用户列举查询耗时过长的问题,千万级用户查询可以实现秒级响应。

    分布式存储文件容灾同步的方法、系统、设备和存储介质

    公开(公告)号:CN116644049A

    公开(公告)日:2023-08-25

    申请号:CN202310692813.0

    申请日:2023-06-12

    Inventor: 王铂

    Abstract: 本发明提供一种分布式存储文件容灾同步的方法、系统、设备和存储介质,方法包括:响应于文件写入源站点,通知其他数据站点进行数据更新;响应于所述文件的大小超过阈值,在所述源站点对所述文件进行分片和压缩,并将所述文件传输到对应的目标站点;响应于目标站点接收到所述文件,对压缩相关信息进行解压,并响应于目标站点接收到的文件的数据大小达到第二阈值,断开所述源站点和所述目标站点的连接;以及循环获取记录数据,响应于所述记录数据中存在未同步完成的记录,向所述源站点发送继续同步的请求以从上次断开的位置继续传输所述文件。本发明可以提升超大文件的同步速度,以及在故障出现时,可以从故障点附近进行断点重传。

    一种对象存储的配额功能优化方法及系统

    公开(公告)号:CN113806081A

    公开(公告)日:2021-12-17

    申请号:CN202111017855.1

    申请日:2021-08-31

    Inventor: 王铂 陶桐桐

    Abstract: 本发明提供了一种对象存储的配额功能优化方法及系统,所述优化方法包括接收客户端的数据上传请求;获取预设的存储配额信息,根据所述配额信息确定配额缓存参数,并将集群的使用信息读取到缓存中;根据所述配额缓存参数,判断当前上传数据是否超出配额,若能上传,在上传完成后,更新缓存中的集群使用信息。根据使用者设置的配额值来确定存储桶配额阈值和存储桶配额缓存信任时间,使用不同的参数值,在配额大的时候,增大配额阈值,以及信任时间,可以让集群能够更加长的时间使用缓存的数据,以及在即将达到配额的过程中,能够更加精确的限制上传,提高存储性能。

    分布式存储服务端QoS优化方法、系统、终端及存储介质

    公开(公告)号:CN113687780B

    公开(公告)日:2024-02-23

    申请号:CN202110872204.4

    申请日:2021-07-30

    Abstract: 本发明提供一种分布式存储服务端QoS优化方法、系统、终端及存储介质,包括:预先设置服务质量模板的各参数项的取值范围;利用随机算法根据各参数项的取值范围生成多目标优化算法的初始种群;预先构建基于服务质量模板的参数项取值的客户端请求处理速度目标函数和内部请求处理速度目标函数;利用客户端请求处理速度目标函数和内部请求处理速度目标函数计算种群适应度;按非支配排序方法选择适应度高的种群进行优化迭代,得到服务质量模板的参数项取值最优方案集。本发明可有效处理调度服务器内外的I/O请求,得到最优的配置参数,使用者可根据这些最优解集以及自己的实际需要来配置QoS模板参数,从而提高集群的服务质量。

Patent Agency Ranking