-
公开(公告)号:CN106528451B
公开(公告)日:2019-09-03
申请号:CN201611001521.4
申请日:2016-11-14
Applicant: 哈尔滨工业大学(威海) , 威海翰宝网络科技有限公司
IPC: G06F12/0862
Abstract: 公开了针对小文件的二级缓存预取的云存储框架及构建方法,其中云存储框架包括:对象存储器、关联性计算模块、数据合并模块、存储节点缓存模块和代理节点缓存模块。本发明首先计算不同对象之间的关联性,并将关联度高的对象合并为一个数据集合,通过对这些数据集合进行缓存来达到数据预取的目的。一方面可以将随机磁盘访问转变为连续磁盘访问,提高存储系统的效率;另一方面通过一次性将对象集合转入代理节点缓存模块进行预读,能够节省网络开销;另外将关联度高的小文件合并也减少了元数据的数量,减少对象访问时元数据的操作时间。
-
公开(公告)号:CN106776370A
公开(公告)日:2017-05-31
申请号:CN201611106201.5
申请日:2016-12-05
Applicant: 哈尔滨工业大学(威海) , 威海翰宝网络科技有限公司
IPC: G06F12/0862 , G06F3/06
Abstract: 本发明涉及一种基于对象关联性评估的云存储方法及装置,其解决了现有海量小文件存储方法写入响应时间长、索引维护代价高的技的技术问题,其首先分析对象时序关联性和语义关联性从而建立关联性评估模型,生成对象关联性矩阵;然后采用图聚类算法根据关联性矩阵将对象划分到不同簇中,以局部相似度排序简化预取对象甄选过程,实现对象预取。其可广泛应用于小文件访问的效率优化。
-
公开(公告)号:CN106528451A
公开(公告)日:2017-03-22
申请号:CN201611001521.4
申请日:2016-11-14
Applicant: 哈尔滨工业大学(威海) , 威海翰宝网络科技有限公司
IPC: G06F12/0862
Abstract: 公开了针对小文件的二级缓存预取的云存储框架及构建方法,其中云存储框架包括:对象存储器、关联性计算模块、数据合并模块、存储节点缓存模块和代理节点缓存模块。本发明首先计算不同对象之间的关联性,并将关联度高的对象合并为一个数据集合,通过对这些数据集合进行缓存来达到数据预取的目的。一方面可以将随机磁盘访问转变为连续磁盘访问,提高存储系统的效率;另一方面通过一次性将对象集合转入代理节点缓存模块进行预读,能够节省网络开销;另外将关联度高的小文件合并也减少了元数据的数量,减少对象访问时元数据的操作时间。
-
-