-
公开(公告)号:CN112395440A
公开(公告)日:2021-02-23
申请号:CN202011333525.9
申请日:2020-11-24
Applicant: 华中科技大学
IPC: G06F16/51 , G06F16/53 , G06F16/583 , G06F16/901 , G06F12/0895 , G06F12/0875 , G06F12/123
Abstract: 本发明公开了一种缓存方法、高效图像语义检索方法和系统,属于语义存储技术领域。本发明利用进制转换压缩哈希码将原本是01构成的字符串(或数组),压缩为十进制数,存储于整型变量中。这样,单个检索结果经压缩后,所需要的存储空间大大减少,使得在可接受的存储开销范围内,存储大部分检索结果,将缓存的高速读写特性发挥到极致。本发明利用缓存的读写效率高的特点,我们将每次检索元数据得到的检索结果存入缓存中。这样,当下一次检索需求来临时,首先检查缓存中是否已经存储过其检索结果,如果存在,无论检索条件如何复杂,都可以直接从缓存中读取,避免耗时的检索过程。
-
公开(公告)号:CN110245094B
公开(公告)日:2020-12-29
申请号:CN201910526384.3
申请日:2019-06-18
Applicant: 华中科技大学
IPC: G06F12/0862
Abstract: 本发明公开了一种基于深度学习的块级缓存预取优化方法,包括:从测试数据集获取以字节为单位的IO数据,将该IO数据转化为以块为单位的IO数据,判断转化后的IO数据是否在缓存中命中,如果没有则对转化后的IO数据进行顺序预测,以得到多个存储块,将转化后的IO数据存储在内存的IO队列中,并判断该IO队列是否已满,如果是则将内存的IO队列中的所有IO数据输入训练好的Seq2Seq模型中,以得到预测的IO数据,并根据该预测的IO数据获取对应的多个存储块。本发明根据利用深度学习的方法挖掘IO的相关性,并利用基于LSTM的Seq2Seq模型完成IO序列的预测,最后将IO序列预测与顺序预测相结合,从而完成缓存的预取,提升缓存的命中率。
-
公开(公告)号:CN109189696B
公开(公告)日:2020-11-24
申请号:CN201810911523.X
申请日:2018-08-12
Applicant: 华中科技大学 , 深圳市腾讯计算机系统有限公司
IPC: G06F12/0866 , G06K9/62
Abstract: 本发明公开了一种SSD缓存系统及缓存方法,其中系统包括:SSD缓存、存储装置、日志记录装置以及分类装置;分类装置包括:预测模块和历史表模块;预测模块用于利用目标分类器预测目标照片的类别;历史表模块用于存储最近被判定为一次访问文件的照片的元数据信息;分类装置用于在预测模块预测目标照片为一次访问文件,且目标照片的元数据信息未被存储或者目标照片的元数据信息被存储而当前请求与该元数据信息所对应的最近的请求之间的访问间隔大于访问间隔阈值时,将目标照片标记为一次访问文件;否则,将目标照片标记为非一次访问文件。本发明能够有效减小缓存写入,提高SSD缓存的使用寿命并改善SSD缓存的性能。
-
公开(公告)号:CN109166069B
公开(公告)日:2020-09-08
申请号:CN201810785245.8
申请日:2018-07-17
Applicant: 华中科技大学 , 武汉数为科技有限公司
IPC: G06F17/10
Abstract: 本发明公开了一种基于马尔科夫逻辑网络的数据关联方法、系统及设备,包括:利用重点人员数据库、待破案件及其对应的带权规则库构建基于马尔科夫逻辑网络的犯案概率获取模型,得到每一个重点人员犯待破案件的概率,从而筛选出目标对象,进而实现目标对象与待破案件之间的数据关联;带权规则库的获取方法包括:利用与待破案件主类型相同的已破案件数据构建本体模型视图集合,并分别提取一阶逻辑规则集合和谓词原子集合,然后利用所提取的两个集合构建基于马尔科夫逻辑网络的规则权重学习模型,并训练模型从而得到规则权重,由此得到由一阶逻辑规则和对应的规则权重构成的带权规则库。本发明中规则的获取不依赖于人力,能提高数据关联的准确率。
-
公开(公告)号:CN110191194B
公开(公告)日:2020-07-03
申请号:CN201910508982.8
申请日:2019-06-13
Applicant: 华中科技大学
IPC: H04L29/08 , G06F16/182
Abstract: 本发明公开了一种基于RDMA网络的分布式文件系统数据传输方法,包括:客户端在接收到来自用户的文件访问请求时,向服务端发起RDMA连接请求,服务端在获取到来自客户端的RDMA连接请求后,建立与客户端的RDMA连接,客户端根据文件访问请求生成网络数据访问请求,并利用RDMA连接将该网络数据访问请求发送到服务端,服务端对网络数据访问请求进行解析,以获取其中的地址信息,并根据该地址信息获取其对应的文件在该服务端的内存中的地址作为服务端返回地址,服务端将服务端返回地址、以及RDMA远程访问权限信息发送到客户端。本发明能够解决现有分布式文件系统存在的数据传输过程中内存操作的开销较大的技术问题,以及服务端的负载较大、传输时延较长的技术问题。
-
公开(公告)号:CN110245095A
公开(公告)日:2019-09-17
申请号:CN201910534260.X
申请日:2019-06-20
Applicant: 华中科技大学
IPC: G06F12/0866 , G06F3/06
Abstract: 本发明公开了一种基于数据块图谱的固态盘缓存优化方法,属于计算机数据存储系统中缓存系统技术领域,本发明所述固态盘缓存优化方法包括数据处理模块,数据块图谱构建模块,数据块关联强度分析模块,数据块重要度分析模块和数据块缓存准入模块。本发明针对传统的缓存算法对访问概率低或者周期性的备份数据仍然进入缓存并替换的问题,首次将图谱应用到缓存领域,提出了基于数据块图谱分析的缓存优化方法。该方法具有较高的缓存空间利用率,可以保证在不降低缓存命中率的情况下,大大减少固态盘的写流量,能够解决传统缓存算法造成的不必要固态盘的写入问题。
-
公开(公告)号:CN110209343A
公开(公告)日:2019-09-06
申请号:CN201810814260.0
申请日:2018-07-23
Applicant: 腾讯科技(深圳)有限公司 , 华中科技大学
IPC: G06F3/06
Abstract: 本发明公开了一种数据存储方法、装置、服务器及存储介质,属于互联网技术领域。所述方法包括:当接收到对第一数据的写入请求时,查询第二数据的存储位置;当查询到第二数据存储在第一缓存单元时,将第一数据存储到第二缓存单元中;返回对第一数据的写入结果。本发明基于第一缓存单元和第二缓存单元对数据进行存储,相比于单独采用第二缓存单元的数据存储方式,节省了成本,对于已存储在第一缓存单元中的数据,当再次对该数据进行存储时,将该数据存储到第二缓存单元,不仅提高了数据读写速度,而且减少了对第一缓存单元的数据写入次数,避免了第一缓存单元损坏,提高了数据安全性,该种方式兼顾了成本、数据读写速度及安全性等方面的需求。
-
公开(公告)号:CN106713108B
公开(公告)日:2019-08-13
申请号:CN201510779256.1
申请日:2015-11-13
Applicant: 华中科技大学
Abstract: 本发明公开了一种结合用户关系与贝叶斯理论的邮件分类方法,通过提取邮件内包含的用户关系构建用户关系图并结合改进的朴素贝叶斯方法,实现对电子邮件的自动分类,提高分类系统的准确率,减少误判率。本发明提出了可信因子来估算朴素贝叶斯分类器分类结果的可信度,并将朴素贝叶斯方法与用户关系图相结合,采用正常邮件内包含的用户关系来构建用户关系图,并根据用户处理邮件的一般习惯规律生成用户白名单。在新邮件分类的过程中,不断将分类结果反馈至用户关系图,同时更新用户白名单,使得分类系统能根据新邮件的变化自动调整用户关系图及白名单,从而达到更高的准确率。
-
公开(公告)号:CN109189696A
公开(公告)日:2019-01-11
申请号:CN201810911523.X
申请日:2018-08-12
Applicant: 华中科技大学 , 深圳市腾讯计算机系统有限公司
IPC: G06F12/0866 , G06K9/62
Abstract: 本发明公开了一种照片分类器训练方法、SSD缓存系统及缓存方法,其中系统包括:SSD缓存、存储装置、日志记录装置以及分类装置;分类装置包括:预测模块和历史表模块;预测模块用于利用目标分类器预测目标照片的类别;历史表模块用于存储最近被判定为一次访问文件的照片的元数据信息;分类装置用于在预测模块预测目标照片为一次访问文件,且目标照片的元数据信息未被存储或者目标照片的元数据信息被存储而当前请求与该元数据信息所对应的最近的请求之间的访问间隔大于访问间隔阈值时,将目标照片标记为一次访问文件;否则,将目标照片标记为非一次访问文件。本发明能够有效减小缓存写入,提高SSD缓存的使用寿命并改善SSD缓存的性能。
-
公开(公告)号:CN104899161B
公开(公告)日:2018-01-05
申请号:CN201510320769.6
申请日:2015-06-12
Applicant: 华中科技大学
IPC: G06F11/14
Abstract: 本发明公开了一种基于云存储环境的连续数据保护的缓存代理端的设计方案,包括:缓存代理端将根据客户端的操作请求进行相关处理。如果是用户的登录请求,缓存代理端则会判断用户是否存在,如果用户不存在,则为该用户创建元数据记录文件、数据记录文件、时间记录文件和数据映射表,然后进行同步,创建被保护磁盘分区的初始镜像文件;如果存在,继续等待客户端的操作请求。如果是备份请求,缓存代理端则会构造对应的元数据并记录到对应的元数据日志链中,同时将数据写入数据记录文件。如果是恢复请求,缓存代理端则会完成对元数据的检索。本发明能够解决当前主流的备份技术恢复粒度大和传统的连续数据保护技术扩容和数据迁移成本较高的问题。
-
-
-
-
-
-
-
-
-