-
公开(公告)号:CN111007990B
公开(公告)日:2023-09-19
申请号:CN201911345693.7
申请日:2019-12-24
Applicant: 曙光信息产业(北京)有限公司 , 中科曙光信息产业成都有限公司
Abstract: 本申请公开了一种对快照系统中数据块引用进行快速定位的定位方法,包括:步骤1,对主卷创建卷属性,根据主卷创建快照系统,并对快照的卷属性和数据块的数据块属性进行赋值;步骤2,根据数据块的数据块属性,在快照系统中确定对应的快照,生成快照集合;步骤3,根据数据块逻辑块地址,加载快照集合中快照的元数据,确定快照集合中各快照在数据块逻辑地址处、映射到的物理块地址;步骤4,当判定物理块地址等于待迁移数据块源物理块地址时,根据待迁移数据块目标物理块地址,更新对应快照与被迁移数据块之间的映射关系。通过本申请中的技术方案,实现了对快照系统中数据块引用进行快速定位,提高数据块底层数据进行数据迁移的迁移效率。
-
-
公开(公告)号:CN102981870B
公开(公告)日:2016-08-31
申请号:CN201210437209.5
申请日:2012-11-05
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F9/445
Abstract: 本发明公开了一种Linux系统中的磁盘离线处理方法,包括:Linux系统感测到磁盘离线;如果在预定时间内磁盘没有重新上线,则从存储系统中删除磁盘。通过本发明所描述的方法,能够主动管理磁盘上线及离线事件,减少人工干预,管理员只需要根据提示,将磁盘插入或者拔出,其余的工作可以由系统主动完成。对于临时性故障,在宽限期内不做主动的处理,以避免数据的重建造成额外的IO压力。
-
公开(公告)号:CN103544081A
公开(公告)日:2014-01-29
申请号:CN201310505078.4
申请日:2013-10-23
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明公开了一种双元数据服务器的管理方法和装置,其中,每个元数据服务器包括主列表和从列表,该管理方法包括:元数据服务器将接收到的信息存储到自身的主列表中,并将该信息同步到另一个服务器的从列表中;每个元数据服务器根据存储的主列表中的信息对副本进行操作。本发明通过采用主备模式实现了双元数据服务器的系统,并且每个元数据服务器都根据各自的主列表中的信息对副本进行操作,能够在提高系统的服务能力,此外,在元数据服务器中备份另一个元数据服务器的信息,能够增强系统的容错能力,简化主备模式的双元数据服务器系统的管理方式。
-
公开(公告)号:CN102981870A
公开(公告)日:2013-03-20
申请号:CN201210437209.5
申请日:2012-11-05
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F9/445
Abstract: 本发明公开了一种Linux系统中的磁盘离线处理方法,包括:Linux系统感测到磁盘离线;如果在预定时间内磁盘没有重新上线,则从存储系统中删除磁盘。通过本发明所描述的方法,能够主动管理磁盘上线及离线事件,减少人工干预,管理员只需要根据提示,将磁盘插入或者拔出,其余的工作可以由系统主动完成。对于临时性故障,在宽限期内不做主动的处理,以避免数据的重建造成额外的IO压力。
-
公开(公告)号:CN102929789A
公开(公告)日:2013-02-13
申请号:CN201210357225.3
申请日:2012-09-21
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F12/02
Abstract: 本发明公开了记录组织方法和记录组织结构,其中,该方法包括:为每种记录分配一个唯一标识;在对应的磁盘文件中建立与每种记录相对应的数据文件和元数据文件,其中,每种记录的数据文件对应于一个磁盘文件;以及使数据文件只进行连续追加写入操作。通过本发明的技术方案,能够提高大压力下元数据服务器的性能并且具有很好的扩展性。
-
公开(公告)号:CN102541984A
公开(公告)日:2012-07-04
申请号:CN201110326447.4
申请日:2011-10-25
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明提供了一种分布式文件系统客户端的文件系统。本发明中,客户端由内核态模块和用户态守护进程两部分组成。这两个模块通过字符设备进行通信,但是和FUSE的不同点在于,内核态在与用户态通信之前,会将需要的内存页面准备好,并映射为用户态可以访问的虚拟地址,将虚拟地址作为通信的一部分,传递给用户态守护进程。这样以来,用户态进程就可以直接操作内核态事先准备好的内存区域,而不需要再进行内存分配,同时避免了用户态和内核态之间的内存拷贝。
-
公开(公告)号:CN102385623A
公开(公告)日:2012-03-21
申请号:CN201110328295.1
申请日:2011-10-25
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F17/30
Abstract: 在本发明中,目录的内容使用文件来存储,对于目录中的目录项,通过对目录项名称进行哈希,将目录项分为若干子集。对于不同的子集,其在目录文件中按照条带化的方式进行存储,条带的大小相对较大,以使读取磁盘时能够充分利用底层文件系统的预读功能。对于每个子集的条带块中的所有目录项,采用二叉树的方式进行存储,以避免初次读取时需要建立二叉树。对于所有的条带块,采用内存映射(mmap)的方式进行访问,避免每次访问磁盘数据时进行内存分配、调用系统文件读写系统调用所带来的开销。
-
公开(公告)号:CN109814807B
公开(公告)日:2022-05-06
申请号:CN201811624963.3
申请日:2018-12-28
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明公开了一种数据存储方法,包括:客户端将非满条带的原始数据发送至一个数据节点;在数据节点处将非满条带的原始数据额外复制M份并发送至其他M个数据节点,从而将N+M纠删码在非满条带时转为M+1副本存储,其中,N表示满条带时原始数据的个数,M表示校验数据的个数,非满条带的原始数据的个数小于N;写入M份的原始数据之后响应客户端。本发明的实施例在不降低可靠性的前提下,将N+M纠删码非满条带写转化为M+1副本的方式,这样可以大大降低N+M纠删码补齐所带来的额外开销,从而降低了写的延迟。对于小块随机写的应用程序有较大的性能提升,并且保持了可靠性。另外,本发明还公开了相应的数据存储装置。
-
公开(公告)号:CN111007990A
公开(公告)日:2020-04-14
申请号:CN201911345693.7
申请日:2019-12-24
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本申请公开了一种对快照系统中数据块引用进行快速定位的定位方法,包括:步骤1,对主卷创建卷属性,根据主卷创建快照系统,并对快照的卷属性和数据块的数据块属性进行赋值;步骤2,根据数据块的数据块属性,在快照系统中确定对应的快照,生成快照集合;步骤3,根据数据块逻辑块地址,加载快照集合中快照的元数据,确定快照集合中各快照在数据块逻辑地址处、映射到的物理块地址;步骤4,当判定物理块地址等于待迁移数据块源物理块地址时,根据待迁移数据块目标物理块地址,更新对应快照与被迁移数据块之间的映射关系。通过本申请中的技术方案,实现了对快照系统中数据块引用进行快速定位,提高数据块底层数据进行数据迁移的迁移效率。
-
-
-
-
-
-
-
-
-