-
公开(公告)号:CN103336785B
公开(公告)日:2016-12-28
申请号:CN201310219794.6
申请日:2013-06-04
Applicant: 华中科技大学
IPC: G06F17/30
Abstract: 一种基于网络编码的分布式存储方法及其装置,属于计算机存储技术领域,解决现有基于网络编码的分布式存储方法所存在的存储节点的磁盘IO过大的问题。本发明的分布式存储方法,适用于分布式存储系统,包括数据编码步骤、数据解码步骤和数据修复步骤;本发明的分布式存储装置,包括数据编码模块、数据解码模块和数据修复模块。本发明在数据节点损坏时,从d个数据节点下载不多于原始文件D大小的数据,修复损坏的数据,有效地减小修复带宽;直接从d个数据节点中下载随机选择的γ个编码数据块,数据块在数据节点内没有进行线性运算,在保证数据高可用性的前提下能够减小存储节点的磁盘IO,有效地提高数据节点的磁盘IO效率。
-
公开(公告)号:CN103336785A
公开(公告)日:2013-10-02
申请号:CN201310219794.6
申请日:2013-06-04
Applicant: 华中科技大学
IPC: G06F17/30
Abstract: 一种基于网络编码的分布式存储方法及其装置,属于计算机存储技术领域,解决现有基于网络编码的分布式存储方法所存在的存储节点的磁盘IO过大的问题。本发明的分布式存储方法,适用于分布式存储系统,包括数据编码步骤、数据解码步骤和数据修复步骤;本发明的分布式存储装置,包括数据编码模块、数据解码模块和数据修复模块。本发明在数据节点损坏时,从d个数据节点下载不多于原始文件D大小的数据,修复损坏的数据,有效地减小修复带宽;直接从d个数据节点中下载随机选择的γ个编码数据块,数据块在数据节点内没有进行线性运算,在保证数据高可用性的前提下能够减小存储节点的磁盘IO,有效地提高数据节点的磁盘IO效率。
-
公开(公告)号:CN103294786A
公开(公告)日:2013-09-11
申请号:CN201310184416.9
申请日:2013-05-17
Applicant: 华中科技大学
IPC: G06F17/30
Abstract: 本发明公开了一种分布式文件系统的元数据组织管理方法,包括以下步骤:接收来自客户端的元数据请求消息包,并对该元数据请求消息包内容进行解析,根据解析得到的元数据请求消息包的类别将该元数据请求消息包放入对应的消息队列,从消息队列中提取元数据请求消息包,并对该元数据请求消息包进行解析,以获得该元数据请求消息包的请求类型和请求内容,根据元数据请求消息包获取B+树中存放的元数据信息,并对该元数据信息进行相应的读写操作,将读写操作后的结果放入元数据请求响应消息包中,并返回给客户端。本发明能够克服目前元数据读写高并发操作在MDS上造成的元数据处理性能低下的问题,提高元数据服务器的处理能力。
-
-