-
-
公开(公告)号:CN102508891A
公开(公告)日:2012-06-20
申请号:CN201110328292.8
申请日:2011-10-25
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F17/30
Abstract: 本发明提供了一种基于丢弃的多元数据服务器元数据日志一致性的方法,主元数据服务器收到元数据请求后,将其保存到内存后,传播请求给从元数据服务器;从元数据服务器接收传播请求保存到内存后,应答主元数据服务器;主元数据服务器收到应答后将请求提交到日志设备,完成后,提交请求给从元数据服务器;从元数据服务器收到提交请求后,提交到日志设备,同时应答提交请求并应用到磁盘并同步;主元数据服务器收到提交请求应答后,应用到磁盘并同步后,发送丢弃命令给从元数据服务器,并根据丢弃情况保存本地副本日志。通过引入三次通信机制,使得日志系统在日志设备损坏的情况下,可以通过少量拷贝日志文件,来实现恢复,极大了减少了恢复的时间。
-
公开(公告)号:CN103049351B
公开(公告)日:2016-06-08
申请号:CN201210541441.3
申请日:2012-12-13
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明公开了一种多元数据服务器的日志处理方法,包括:在主副本在内存中保存日志之后,将日志传送给从副本;主副本和从副本分别进行记录日志设备和应用元数据磁盘的操作;以及当主副本和从副本完成应用元数据磁盘的操作之后,向对方发送应用结束消息。通过本发明的技术方案,能够提高系统的可用性和可靠性。
-
公开(公告)号:CN103136370B
公开(公告)日:2016-05-25
申请号:CN201310092302.1
申请日:2013-03-21
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明公开了一种元数据的恢复方法和装置,其中,该恢复方法包括:保存元数据服务器出现异常期间生成的事务以及存储的每个事务所对应的文件标识;在元数据服务器异常解除之后,对于保存的事务,根据相同文件标识所对应的事务生成元数据;将生成的元数据发送至元数据服务器。本发明通过保存元数据服务器出现异常期间生成的事务及对应的文件标识,并且由于本发明的方案能够传输相同文件标识对应的事务所生成的元数据,因此,传输的方式可以是针对多个文件并行传输元数据,从而有效提高了元数据恢复的效率,在尽可能短的时间内使多个元数据服务器恢复成一致,增加系统的可靠性,避免了服务器恢复占用大量的时间,尽可能保证用户的业务能够正常进行。
-
公开(公告)号:CN102541982B
公开(公告)日:2013-12-18
申请号:CN201110326051.X
申请日:2011-10-25
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F17/30
Abstract: 本发明提供了一种组织和访问元数据文件日志的方法,使用红黑树组织日志系统的一致性操作所涉及到所有文件,选取日志文件的文件名作红黑树的关键字。本发明通过引入红黑树管理可靠性操作涉及到的文件,减少了可靠性操作中的文件操作次数,提高了可靠性操作的性能。同时,将多个元数据操作写入磁盘的操作进行了聚合管理,极大的减少了文件的sync操作,降低了可靠性操作的处理时间。
-
公开(公告)号:CN103268270A
公开(公告)日:2013-08-28
申请号:CN201310173209.3
申请日:2013-05-10
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明公开了一种方法和装置,其中,该方法包括:在每次对系统中存储的数据生成快照时,在二叉树中创建与本次快照对应的节点;对于每次生成的快照,确定本次生成的快照相比于二叉树中其他节点已存储的快照的非增量数据,并且在存储本次生成的快照时,将非增量数据的索引存储至二叉树中与本次生成的快照所对应的节点。本发明通过不重复存储与已有快照存储的数据相同的数据,从而减少存储多个快照所占用的内存,节约存储快照所需的设备的空间,此外,本发明通过二叉树来管理快照实现了快照的快速定位,并且使系统可以更加高效地使用快照,提高了系统的操作性能。
-
公开(公告)号:CN103235748A
公开(公告)日:2013-08-07
申请号:CN201310145550.8
申请日:2013-04-24
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F11/20
Abstract: 本发明公开了一种元数据的管理方法和系统,其中,该方法包括:在原主服务器出现异常的情况下,根据存储数据量选择备份服务器作为当前主服务器并替代原主服务器提供服务;根据当前主服务器相比于其它每个备用服务器的差量数据,对每个备用服务器进行同步,其中,在同步期间,禁止将当前主服务器因提供服务而改变的数据发送给其它备份服务器。本发明通过选择当前主服务器且提供服务,并对当前主服务器与备份服务器进行数据同步,能够使当前主服务器进行正常的业务接管,从而有效地实现主备服务器之间的替换,并且在同步期间禁止发送提供服务而改变数据来防止乱序数据同步,从而保证了系统的稳定性和可靠性,提升了用户的体验感。
-
-
公开(公告)号:CN102024022A
公开(公告)日:2011-04-20
申请号:CN201010536551.1
申请日:2010-11-04
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明提供了一种分布式文件系统复制元数据的方法。多个元数据副本排定次序,按照次序充当主副本;充当主副本的元数据副本承担写操作,并生成日志记录;主副本生成的日志写给从副本保存,保存该日志的从副本达到一定数目后,保存操作成功;从副本的日志记录集中应用到本地数据;如果主副本失效,第一从副本更新本地数据,转换为主副本,标记陈旧数据后对外提供服务;如果从副本失效,主副本记录所有发往从副本日志的信息,当从副本重新可用时,发往从副本,从副本写回日志后即完成更新。本发明通过将主副本的日志进行成批传送到从副本,缩短了元数据操作的关键路径,并提高了应用效率;从副本在主节点失效后更新本地数据并承担主副本角色,标记陈旧数据后即可对外提供服务,缩短了切换时间。
-
公开(公告)号:CN103019886B
公开(公告)日:2016-03-30
申请号:CN201210533418.X
申请日:2012-12-11
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F11/14
Abstract: 本发明公开了一种,多元数据服务器下日志系统的恢复方法,包括:在宕机的节点重启时,查询当前元数据文件的大小;将当前元数据文件的大小与预定的阈值进行比较;以及在当前元数据文件的大小小于预定的阈值时,将当前元数据文件直接拷贝到所述节点。通过本发明的技术方案,能够降低恢复元数据文件的时间。
-
-
-
-
-
-
-
-
-