-
公开(公告)号:CN101968755B
公开(公告)日:2012-02-08
申请号:CN201010531955.1
申请日:2010-11-04
Applicant: 清华大学
Abstract: 一种自适应应用负载变化的快照生成方法属于计算机存储技术领域,目的是设计一种应用感知的自适应快照生成方法,根据被保护数据的修改频率调节生成快照的频率,既达到自动保留有用历史数据的要求,又保证较好的系统性能与空间利用率,其特征在于:为快照分配一个计数区记录源数据区各个块的修改次数,创建守护进程,控置快照生成。当快照计算机收到对源数据区的写请求时,将其对应源数据区数据块的修改次数增加,并根据设定的阈值判断是否需要生成快照,如果是,则发送消息给守护进程,守护进程控制生成新快照。本方法具有自适应应用负载变化、实现简单几乎不影响读写性能影响和使用灵活方便的优点。
-
公开(公告)号:CN102164161A
公开(公告)日:2011-08-24
申请号:CN201110003511.5
申请日:2011-01-10
Applicant: 清华大学
IPC: H04L29/08
Abstract: 本发明提供了一种对并行文件系统进行文件布局提取的方法和装置,通过分离数据和元数据的管理与存储,避免了数据访问对元数据访问性能的干扰,简化元数据一致性的管理,也方便了元数据的性能优化,元数据服务器选取专用元数据存储设备,建立专用元数据文件系统,并行文件系统目录树、文件元数据等以文件的形式存储于元数据文件系统,元数据文件系统以B+树形式组织文件,提供了快速的文件读取性能。
-
公开(公告)号:CN102004677A
公开(公告)日:2011-04-06
申请号:CN201010531952.8
申请日:2010-11-04
Applicant: 清华大学
IPC: G06F11/00
Abstract: 海量数据分级存储评测系统属于计算机系统评测领域,尤其涉及其中分级存储系统评测领域。本发明的特征在于通过快照还原一个真实的文件系统场景,同时通过比较相邻两快照之间的差别确定后续将要被访问的文件;根据两快照间文件属性信息的不同和已有的文件访问特征对文件访问请求进行加密处理,从而提供一个真实的文件系统场景及相应的后续文件访问请求,并将文件访问请求在生成的文件系统场景上进行播放,模拟真实环境中分级存储系统的应用情况,最终有效的实现对分级存储系统的评测与分析。
-
公开(公告)号:CN101252603B
公开(公告)日:2011-03-30
申请号:CN200810103809.1
申请日:2008-04-11
Applicant: 清华大学
Abstract: 基于存储区域网络SAN的分布式锁管理方法属于网络存储领域,其特征在于:集群各节点服务器构成多重主从式子集群,即Quorum,子集群中一个节点作为主服务器,其他均为从属服务器;多重子集群包括一个State Quorum和若干个Lock Quorum,分别负责系统节点生灭状态的管理和名字空间中读写访问锁的管理;State Quorum由所有节点构成,Lock Quorum可由任意数量的节点构成,其大小及构成可由用户灵活配置;不论是State Quorum,还是LockQuorum,都遵循子集群侦测协议,通过该协议,各节点能够选举Quorum中的唯一主服务器,构建正常态的Quorum;各个Lock Quorum分管名字空间的不同分段且互不交叠,按照服务能力分别被赋予不同的权值。各Lock Quorum独立统计自己的负载情况,当一个Lock Quorum所负担的锁管理任务过于繁重时,触发负载平衡过程,将本Lock Quorum的部分任务分流给其他Lock Quorum。本发明易于灵活配置,具有良好的性能、高可扩展性以及高可靠性。
-
公开(公告)号:CN101968755A
公开(公告)日:2011-02-09
申请号:CN201010531955.1
申请日:2010-11-04
Applicant: 清华大学
Abstract: 一种自适应应用负载变化的快照生成方法属于计算机存储技术领域,目的是设计一种应用感知的自适应快照生成方法,根据被保护数据的修改频率调节生成快照的频率,既达到自动保留有用历史数据的要求,又保证较好的系统性能与空间利用率,其特征在于:为快照分配一个计数区记录源数据区各个块的修改次数,创建守护进程,控置快照生成。当快照计算机收到对源数据区的写请求时,将其对应源数据区数据块的修改次数增加,并根据设定的阈值判断是否需要生成快照,如果是,则发送消息给守护进程,守护进程控制生成新快照。本方法具有自适应应用负载变化、实现简单几乎不影响读写性能影响和使用灵活方便的优点。
-
公开(公告)号:CN101567003A
公开(公告)日:2009-10-28
申请号:CN200910085706.1
申请日:2009-05-27
Applicant: 清华大学
Abstract: 并行文件系统中资源的管理和分配方法属于SAN区域网络存储领域。其特征是:通过将存储资源分成多个分配组(Allocate Group,AG),并行分配,降低了单个分配组对其他分配组的影响,提高了并行文件系统的吞吐率、可靠性和管理效率,每个AG可以由单个磁盘分区或者多个磁盘按照Raid形式构成,多个AG之间也可以使用副本策略,通过存储资源的两层虚拟化,提高系统的性能、可用性和可靠性,每个分区使用B+树进行空间分配,并存储自己的B+树数据,与传统SAN文件系统相比降低了并行文件系统元数据服务器的压力,提高了分配效率,在通过B+树实现的目录树中索引文件元数据和目录元数据,保持文件元数据存储的局部性,与传统SAN文件系统相比提高了元数据访问的性能。
-
公开(公告)号:CN100405777C
公开(公告)日:2008-07-23
申请号:CN200610088931.7
申请日:2006-07-27
Applicant: 清华大学
Abstract: 以太网存储区域网络中基于目标器内存设备的缓存方法属于存储区域网络存储技术领域,其特征在于:它使用由IP SAN系统目标器上丰富的DARM内存资源所构成的大容量快速设备作为缓存资源,将IP SAN系统的磁盘空间划分为大小一致的映射粒度,自动的对磁盘空间的热点粒度进行缓存,它认为某一个粒度一旦被访问即为热点粒度,并且一直认为这个粒度是热点粒度直到此粒度由于长时间没有被访问而被替换出缓存设备为止,我们针对读操作占优的应用实现了写直达策略的缓存。它可以充分利用IP SAN系统目标器上的CPU以及DRAM内存资源,减少I/O延迟,减轻存储磁盘的I/O负载从而提高系统的整体性能。
-
公开(公告)号:CN101162469A
公开(公告)日:2008-04-16
申请号:CN200710177065.3
申请日:2007-11-09
Applicant: 清华大学
IPC: G06F17/30
Abstract: 基于快照的细粒度文件与目录版本管理方法属于多版本文件系统领域。将整个文件系统中文件和目录名字组成的名字空间与代表不同版本生成时间的版本空间独立开来,采用相对独立的策略进行管理,形成了层级化的二维结构:在名字空间中形成从根目录到文件的层级结构;版本空间中,文件和目录的版本按照版本生成的时间通过索引结构组织起来,形成版本空间中的层级结构。名字空间的检索采用了基于动态哈希的索引策略,版本空间的检索采用了基于红黑树的索引策略,目录版本和文件版本分别采用针对各自特点的红黑树结构变体。本发明能够大大提升系统的可用性和性能,将维护历史版本所带来的时间空间消耗控制在可接受的范围内。
-
公开(公告)号:CN1305265C
公开(公告)日:2007-03-14
申请号:CN200310103194.X
申请日:2003-11-07
Applicant: 清华大学
Abstract: SAN系统中基于负载自适应的异步远程镜像方法属于网络存储技术领域,其特征在于:在由主机、包括主机适配卡、交换机和数据链路的互联设备、I/O节点及其磁盘阵列、为上述I/O节点提供网络硬盘的镜像I/O节点即Mirror I/O node及其磁盘阵列构成的存储区域网络SAN中,I/O节点的SCSI目标模拟器可根据I/O负载的大小,采取两种不同的异步镜像方式来减少命令响应时间,而且在镜像关系初建的同时,或存在磁盘发生失败更换磁盘工作后,进行磁盘间的同步来保证数据的一致性,同时对目标模拟器各子模块所有的出错情况可进行不同的分析处理。它能在保证数据安全性、一致性的前提下,减少写命令的响应时间,而且I/O负载越大,其效果越明显。
-
公开(公告)号:CN1254748C
公开(公告)日:2006-05-03
申请号:CN200310103044.9
申请日:2003-10-31
Applicant: 清华大学
IPC: G06F12/08
Abstract: 存储区域网络中分布式虚拟化存储的方法属于虚拟化存储技术的领域,其特征在于:基于存储区域网络的虚拟化网络存储系统,系统的内核模块将文件系统的I/O请求操作地址映射到适当的网络磁盘内,实现虚拟化存储的功能,同时用以太网向机群系统中的其它节点提交内核元数据进行同步操作的请求后,在管理节点机中的中央控制和管理模块统一控制,对其中的元数据作相应的操作,并把操作结果加入到内核模块中的元数据表中去,使得机群系统所有节点的虚拟存储元数据保持一致,提供一个统一格式的网络存储资源视图,以实现分布式虚拟化存储系统。
-
-
-
-
-
-
-
-
-