用户请求处理方法、装置、设备和介质

    公开(公告)号:CN115242727B

    公开(公告)日:2023-08-08

    申请号:CN202210831645.4

    申请日:2022-07-15

    Abstract: 本申请公开了一种用户请求处理方法、装置、设备和介质,涉及通信技术领域,具体涉及数据处理技术领域。该方法包括:确定当前处理的请求队列中的第一待处理用户请求的数量;请求队列用于存储优先级相同的用户请求;若根据数量确定当前处理的请求队列满足换队条件,则从下一请求队列中获取第二待处理用户请求;当前处理的请求队列的优先级与下一请求队列的优先级不同;根据第一待处理用户请求和第二待处理请求更新服务器的任务处理队列;任务处理队列用于存储服务器待响应的用户请求。能够合理分配带宽,提高整体带宽的利用率。

    一种异构粒度存储系统中的缺失率曲线构建方法和系统

    公开(公告)号:CN115130032A

    公开(公告)日:2022-09-30

    申请号:CN202210789994.4

    申请日:2022-07-05

    Abstract: 本发明公开了一种异构粒度存储系统中的缺失率曲线构建方法,包括:接收访问请求序列,并设置计数器i=1,判断i是否等于访问请求序列中的访问请求总数,如果不等于则将访问请求序列中的第i条访问请求载入缓存过滤器中,并判断该第i条访问请求对应的访问对象是否在缓存过滤器中命中,如果没有则根据第i条访问请求对应的访问对象的大小获取该访问对象的采样率,根据得到的第i条访问请求对应的访问对象的采样率对该访问对象进行采样,并计算该访问对象的重用距离,设置计数器i=i+1。本发明能够解决现有异构粒度存储系统中由于内容流行度差异以及对象大小差异,从而导致的字节缺失率曲线与对象缺失率曲线构建不准确的技术问题。

    一种缓存系统、缓存处理方法、装置、设备及介质

    公开(公告)号:CN111737168A

    公开(公告)日:2020-10-02

    申请号:CN202010585684.1

    申请日:2020-06-24

    Abstract: 本申请实施例公开了一种缓存系统、缓存处理方法、装置、设备及介质,其中方法包括:依照当前时刻检测到的I/O请求,确定当前时刻各存储节点的缓存命中率曲线,在满足缓存处理条件时,基于最新时刻各存储节点的缓存命中率曲线确定目标缓存配置方案,并依照目标缓存配置方案指示的各存储节点的待配缓存空间大小,调整各存储节点对应缓存实例的缓存空间大小。本申请实施例,可依照I/O请求实时分析出各存储节点的缓存命中率曲线,并基于各存储节点的缓存命中率曲线搜索出最佳缓存配置方案,动态调整各缓存实例的缓存空间,有利于实现缓存空间的按需分配,有效提高缓存利用率。

    一种基于相似性哈希的图像暗数据价值评估方法

    公开(公告)号:CN110390352A

    公开(公告)日:2019-10-29

    申请号:CN201910557932.9

    申请日:2019-06-26

    Abstract: 本发明公开了一种基于相似性哈希的图像暗数据价值评估方法,包括以下步骤:获取暗数据集,并将该暗数据集输入训练好的DSTH模型中,以得到该暗数据集中每幅图像的哈希码,根据得到的暗数据集中每幅图像的哈希码构建哈希图谱,该哈希图谱中的节点就是图像的哈希码,节点之间的连接边是构建的邻接矩阵中的元素,获取得到的哈希图谱中每个节点的重要性分数,按照从大到小的顺序对得到的所有节点的重要性分数进行排序,将排序结果中前k位的重要性分数所对应的图像输出给用户。本发明针对企业对拥有的大规模图像暗数据占据着巨大的存储空间且缺乏管理和利用的问题,通过“点亮”其中价值被忽略的图像暗数据,提升其存储性价比。

    一种无垃圾回收的键值分离存储方法和系统

    公开(公告)号:CN110389942A

    公开(公告)日:2019-10-29

    申请号:CN201910540348.2

    申请日:2019-06-21

    Abstract: 本发明公开了一种无垃圾回收的键值分离存储方法,属于计算机存储技术领域,解决现有键值分离键值存储系统在更新密集型工作负载下无法实现高性能的问题。本发明主要针对更新密集型工作负载,通过对失效数据的有效管理,实现就地更新,从而消除存储过程中的垃圾回收操作,避免键值存储系统中有效数据的频繁重写,减少键值存储系统的写放大。对于更新密集型工作负载,本发明首先采用键值分离的方法将数据存储在值存储管理区,并将数据中的键存储在LSM树中进行管理,接下来通过收集、管理和复用失效数据索引对失效数据实现就地更新、覆盖回收,去除垃圾回收过程,避免由于垃圾回收而产生的开销,提升键值存储系统的性能。

    一种移动云存储环境下缓存数据的预取方法

    公开(公告)号:CN106681990B

    公开(公告)日:2019-10-25

    申请号:CN201510744409.9

    申请日:2015-11-05

    Abstract: 本发明公开了一种云存储环境下缓存数据的预取方法。用户在使用移动终端时访问数据通常会具有顺序滑动屏幕切换的特点,从而使得用户在对文件数据访问时通常具有基于列表顺序的访问特性,因此可以使用基于列表顺序的数据预取策略来提高数据预取的有效性,从而提高缓存效率。基于列表顺序的数据预取策略首先需要记录用户对每个文件的历史访问记录,因此在初始使用时具有冷启动的问题,在初始时,先以初始预取长度为1进行预取,然后根据预取文件是否被访问来确定预取长度并进行预取,在有了历史访问记录之后,通过计算访问当前文件后访问其基于列表的后继文件的概率来确定是否进行预取。本发明能通过少量的流量代价来换取较大的等待延迟时间的减少。

    一种基于固态盘读写特性的I/O调度方法

    公开(公告)号:CN106775438B

    公开(公告)日:2019-08-30

    申请号:CN201510827493.0

    申请日:2015-11-25

    Abstract: 本发明公开了一种基于固态盘不同读写特性的I/O调度方法。通过黑盒测试的方式获取固态盘内部最优的合并请求聚簇页大小;将读写请求分离,分别批量地处理读请求和写请求,来避免固态盘中读写混合模式下的相互干扰;考虑到顺序模式下读请求的性能远远高于随机模式下读请求的性能,对读请求不仅按照请求到来的时间在链表中排队,还按照读请求的起始访问地址在红黑树中排序,以构造读请求的顺序性,对排序之后的读请求进行前向合并和后向合并,合并之后请求的最大大小不超过聚簇页大小;考虑到顺序模式下写请求的性能和随机模式下写请求的性能基本相同,写请求只需要按照请求到来的时间在链表中排队,不需要在红黑树中排序构造写请求的顺序性。

    一种云环境下基于重复数据的缓存方法

    公开(公告)号:CN106155934B

    公开(公告)日:2019-08-09

    申请号:CN201610477673.5

    申请日:2016-06-27

    Inventor: 周可 王桦 饶琦

    Abstract: 本发明公开了一种云环境下基于重复数据的缓存方法,属于计算机云存储技术领域。该方法将文件分为多个数据块,以数据块的方式加载于缓存中,重复的数据块只加载一次,由此提高缓存空间的利用率;进一步地,研究文件间的重复块的规律,提出一种基于重复比例考量的缓存替换方法,提高缓存命中率,最终提高缓存系统的效率。

    一种结合用户属性的邮件分类方法及系统

    公开(公告)号:CN106230690B

    公开(公告)日:2019-06-11

    申请号:CN201610592259.9

    申请日:2016-07-25

    Inventor: 周可 王桦 沈慧羊

    Abstract: 本发明公开了一种结合用户属性的邮件分类方法及系统,属于数据挖掘技术领域,首先利用分类器初始化新邮件垃圾邮件概率,然后在搭建好的用户属性网中匹配到新邮件的用户爱好属性、邮件主题属性、用户亲近度属性和用户行为属性,之后依次利用用户爱好属性、邮件主题属性、用户亲近度和用户行为属性对垃圾邮件概率的影响,更新邮件的垃圾邮件概率。本发明还提供了实现上述方法的系统。本发明通过结合用户属性对邮件进行分类判定,提高了现有邮件分类技术的精准性。

    一种适合移动设备访问的云存储方法和系统

    公开(公告)号:CN106331001A

    公开(公告)日:2017-01-11

    申请号:CN201510348615.8

    申请日:2015-06-23

    CPC classification number: H04L67/1097

    Abstract: 本发明公开了一种适合移动设备访问的云存储系统,包括:云存储系统分成两层:移动节点组层-存储节点层;移动节点组提供高速缓存层的功能,使用完全副本的方式,保证数据可靠性的同时为移动设备提供高性能的数据存储服务,采用一种曲线拟合热度值的动态副本管理算法管理移动节点组中的副本,移动设备向最近的移动节点组发出数据访问请求,组长选择组内一个空闲移动节点,根据移动客户端访问请求类型进行数据服务,如果移动客户端需要访问的数据不在离其最近的节点组中,则移动节点代替移动设备访问存储节点。本发明的方法能降低移动客户端处理数据的压力,减少移动客户端功耗的同时提高其访问速度,并且减少了系统中的冗余数据,节省了存储空间。

Patent Agency Ranking