-
公开(公告)号:CN102375780B
公开(公告)日:2014-07-30
申请号:CN201110326472.2
申请日:2011-10-25
Applicant: 无锡城市云计算中心有限公司
IPC: G06F12/08
Abstract: 本发明公开了一种分布式文件系统中高效的元数据缓存管理方法,该方法通过多种策略来优化元数据缓存的管理,尽可能减少由于软件的使用方式不合理而照成内存访问效率的低下,以及并发导致的CPU闲置,从而使得元数据服务器能够充分地利用内存和CPU等硬件资源,提供尽可能高的服务能力。
-
公开(公告)号:CN103678715A
公开(公告)日:2014-03-26
申请号:CN201310752681.2
申请日:2013-12-31
Applicant: 无锡城市云计算中心有限公司
CPC classification number: G06F17/30194 , G06F17/30088
Abstract: 本发明提供一种分布式文件系统中支持快照的元数据信息管理方法,包括以下步骤:对段资源进行管理;创建文件快照并对创建的文件快照进行修改;对iNode资源进行管理;创建目录快照并对创建的目录快照进行修改。本发明提供的分布式文件系统中支持快照的元数据信息管理方法,将MDS中iNode信息、段信息分别采用iNode管理器和段管理器进行维护,并通过管理器维护的方法,顺其自然的实现了分布式文件系统的快照。
-
公开(公告)号:CN102541983B
公开(公告)日:2013-07-31
申请号:CN201110326365.X
申请日:2011-10-25
Applicant: 无锡城市云计算中心有限公司
Abstract: 本发明提供了一种分布式文件系统中多客户端缓存同步的方法,将元数据服务器作为客户端缓存信息的控制节点,对该元数据服务器上维护的索引节点,记录各个客户端在该元数据服务器上的存储状态;将元数据信息按照客户端缓存属性分为只读缓存和可写缓存;对于元数据只读缓存,当客户端第一次读取元数据时,元数据服务器授予客户端只读权限或者可写缓存权限,并且在操作完毕后一直持有该权限;对于元数据可写缓存,客户端的修改暂时保存到本地,当满足写回触发条件时进行写回。本发明该严格保证了不同客户端之间缓存的一致性,并且其实现与Lustre和GPFS的分布式锁相比较而言,开发成本相对较小。
-
公开(公告)号:CN102541983A
公开(公告)日:2012-07-04
申请号:CN201110326365.X
申请日:2011-10-25
Applicant: 无锡城市云计算中心有限公司
Abstract: 本发明提供了一种分布式文件系统中多客户端缓存同步的方法,将元数据服务器作为客户端缓存信息的控制节点,对该元数据服务器上维护的索引节点,记录各个客户端在该元数据服务器上的存储状态;将元数据信息按照客户端缓存属性分为只读缓存和可写缓存;对于元数据只读缓存,当客户端第一次读取元数据时,元数据服务器授予客户端只读权限或者可写缓存权限,并且在操作完毕后一直持有该权限;对于元数据可写缓存,客户端的修改暂时保存到本地,当满足写回触发条件时进行写回。本发明该严格保证了不同客户端之间缓存的一致性,并且其实现与Lustre和GPFS的分布式锁相比较而言,开发成本相对较小。
-
公开(公告)号:CN102567445A
公开(公告)日:2012-07-11
申请号:CN201110326510.4
申请日:2011-10-25
Applicant: 无锡城市云计算中心有限公司
IPC: G06F17/30
Abstract: 本发明提供了一种分布式文件系统中保证元数据一致性的方法,将分布式文件系统以块为单位进行组织存储;在元数据修改时,首先修改内存数据块,同时将对数据块的修改记录下来;将元数据数据块修改信息写到日志文件,并将修改后的元数据数据块同步到磁盘;在修改后的元数据数据块同步到磁盘后,丢弃日志文件中对元数据块的记录条目,只保留修改记录;在故障发生后,进入恢复流程,根据日志文件中对元数据块的修改信息,再次将相应修改应用到元数据块。本发明在不影响元数据操作效率的前提下,能够保证故障发生后,通过恢复来清除故障发生时尚未来得及完全同步到磁盘上的元数据,使整个文件系统的元数据达到一致性。
-
公开(公告)号:CN102375780A
公开(公告)日:2012-03-14
申请号:CN201110326472.2
申请日:2011-10-25
Applicant: 无锡城市云计算中心有限公司
IPC: G06F12/08
Abstract: 本发明公开了一种分布式文件系统中高效的元数据缓存管理方法,该方法通过多种策略来优化元数据缓存的管理,尽可能减少由于软件的使用方式不合理而照成内存访问效率的低下,以及并发导致的CPU闲置,从而使得元数据服务器能够充分地利用内存和CPU等硬件资源,提供尽可能高的服务能力。
-
公开(公告)号:CN102567444B
公开(公告)日:2013-11-06
申请号:CN201110326482.6
申请日:2011-10-25
Applicant: 无锡城市云计算中心有限公司
IPC: G06F17/30
Abstract: 本发明提供了一种分布式文件系统数据访问优化的方法,在元数据查找操作中添加意图标记,所述意图标记用于标记该查找操作是否创建文件,如果所述查找操作有创建文件意图,则在查找操作中添加意图标记;服务器端收到查找请求后,首先做元数据查找操作,如果已存在,则返回已存在,如果不存在,则执行意图标记的创建文件请求,在元数据服务器创建文件;通过接口函数使数据不经用户态缓冲区而直接复制或者使数据只在服务器间复制,不通过客户端中转。本发明将相关元数据操作进行合并,同时,在数据复制时不经过客户端,使得元数据和数据的读写和复制操作效率大大提高,提升了服务器对于元数据和数据的操作速度和效率。
-
公开(公告)号:CN102567444A
公开(公告)日:2012-07-11
申请号:CN201110326482.6
申请日:2011-10-25
Applicant: 无锡城市云计算中心有限公司
IPC: G06F17/30
Abstract: 本发明提供了一种分布式文件系统数据访问优化的方法,在元数据查找操作中添加意图标记,所述意图标记用于标记该查找操作是否创建文件,如果所述查找操作有创建文件意图,则在查找操作中添加意图标记;服务器端收到查找请求后,首先做元数据查找操作,如果已存在,则返回已存在,如果不存在,则执行意图标记的创建文件请求,在元数据服务器创建文件;通过接口函数使数据不经用户态缓冲区而直接复制或者使数据只在服务器间复制,不通过客户端中转。本发明将相关元数据操作进行合并,同时,在数据复制时不经过客户端,使得元数据和数据的读写和复制操作效率大大提高,提升了服务器对于元数据和数据的操作速度和效率。
-
公开(公告)号:CN102508890A
公开(公告)日:2012-06-20
申请号:CN201110326511.9
申请日:2011-10-25
Applicant: 无锡城市云计算中心有限公司
IPC: G06F17/30
Abstract: 本发明提供了一种对象存储系统中对象一致性操作的方法,采用多副本的方式保存对象,同一对象的不同副本存储在不同的OSD上;在同一对象的副本中选定一个为主副本,其余作为从副本,所有修改操作均发给主副本;主副本将修改操作写入内存,然后将修改操作转发给从副本;从副本接收到修改操作后,应答主副本;主副本受到应答后,应答客户端;主副本控制主从的磁盘操作。本发明通过主副本和从副本之间的确认信号的交换,使得每次对元数据的修改,都能使得主从副本之间保持一致,保证了副本间的一致性。
-
公开(公告)号:CN103678715B
公开(公告)日:2017-06-23
申请号:CN201310752681.2
申请日:2013-12-31
Applicant: 无锡城市云计算中心有限公司
Abstract: 本发明提供一种分布式文件系统中支持快照的元数据信息管理方法,包括以下步骤:对段资源进行管理;创建文件快照并对创建的文件快照进行修改;对iNode资源进行管理;创建目录快照并对创建的目录快照进行修改。本发明提供的分布式文件系统中支持快照的元数据信息管理方法,将MDS中iNode信息、段信息分别采用iNode管理器和段管理器进行维护,并通过管理器维护的方法,顺其自然的实现了分布式文件系统的快照。
-
-
-
-
-
-
-
-
-