-
公开(公告)号:CN102929798A
公开(公告)日:2013-02-13
申请号:CN201210359214.9
申请日:2012-09-21
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明公开了存储介质的层次组织结构,该层次组织结构包括作为根节点的接入层、多个介质分类层和介质层,其中,多个介质分类层中的每一层都代表一种介质分类方式,从而在每一介质分类层中根据预定的分类方式将多个介质分为多组,每一组中包括多个相同种类的节点。通过本发明的技术方案,能够轻松地实现磁盘选择的多种需求并实现多种选择策略。
-
-
公开(公告)号:CN102385622A
公开(公告)日:2012-03-21
申请号:CN201110328293.2
申请日:2011-10-25
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F17/30
Abstract: 本发明提供了一种文件系统stride访问模式的预读方法,在每次读之前,更新stride预读状态的历史读记录,并根据历史读记录,通过stride模式的匹配算法来检测是否是stride读模式;如果是,则开启stride模式的预读,进入stride模式的预读算法;否则进入顺序预读算法。本发明对特定应用的访问模式跨步读模式(stride模式)设计的预读方法,有效提高了应用程序stride模式访问的性能。
-
公开(公告)号:CN107066205A
公开(公告)日:2017-08-18
申请号:CN201611257420.3
申请日:2016-12-30
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明提出了一种数据存储系统,该数据存储系统包括:Hadoop集群,和设置在Hadoop集群中的组件、NFS服务器模块,其中,组件包括Map‑Reduce框架,并且Map‑Reduce框架用于执行Map‑Reduce流程,以及Map‑Reduce流程包括Map任务和Reduce任务,设置在NFS服务器模块中的磁盘阵列模块,并且通过磁盘阵列模块和NFS服务器模块构成共享存储设备,从而为Hadoop集群提供了存储,以及将各个Map任务的结果存储至共享存储设备,以去掉shuffle过程,从而优化了Map任务和Reduce任务的流程;以及组件将Hadoop集群中使用的文件切分为多个块,并且将每个块均发到不同的计算机节点,从而实现了负载均衡。本发明通过该数据存储系统,从而使得系统在性价比、可靠性、可维护、性能等方面均得到了较大改善。
-
公开(公告)号:CN102929798B
公开(公告)日:2016-07-13
申请号:CN201210359214.9
申请日:2012-09-21
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明公开了存储介质的层次组织结构,该层次组织结构包括作为根节点的接入层、多个介质分类层和介质层,其中,多个介质分类层中的每一层都代表一种介质分类方式,从而在每一介质分类层中根据预定的分类方式将多个介质分为多组,每一组中包括多个相同种类的节点。通过本发明的技术方案,能够轻松地实现磁盘选择的多种需求并实现多种选择策略。
-
公开(公告)号:CN102968503B
公开(公告)日:2015-10-07
申请号:CN201210530823.6
申请日:2012-12-10
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F17/30
Abstract: 本发明公开了一种数据库系统的数据处理方法,所述数据处理方法包括:将数据表中的每一数据记录根据数据记录与数据虚分区的映射关系映射到相应的数据虚分区;基于数据虚分区与数据库节点的映射关系将每一数据虚分区映射到相应的数据库节点;以及,将数据表中的各数据记录存储到相应的数据库节点的相应的数据虚分区中。相应地,本发明还公开了一种数据库系统。采用本发明,可以快速地进行数据的重新划分和分布,从而提高了数据库集群的性能。
-
公开(公告)号:CN103036994B
公开(公告)日:2015-08-19
申请号:CN201210553734.3
申请日:2012-12-18
Applicant: 曙光信息产业(北京)有限公司
IPC: H04L29/08
Abstract: 本发明公开了一种实现负载均衡的云存储系统,包括负载监控服务单元用于在检测出第一云存储站点的负载超过负载阈值时,将应用请求转发给第二云存储站点;第二云存储站点的多个服务接入点中的一个用于将应用请求发送给多个元数据位置管理服务单元中负载较轻的元数据位置管理服务单元;该元数据位置管理服务单元用于根据应用请求确定出与应用相对应的元数据位置信息,以及根据所确定出的元数据位置信息从相应的元数据服务器获取相应的元数据;服务接入点还用于将所获取的元数据以及应用请求发送给数据文件管理子系统以便数据文件管理子系统根据应用请求执行相应的操作。本发明还公开了用于云存储系统的负载均衡方法。本发明可改善云存储系统的性能。
-
公开(公告)号:CN104135388A
公开(公告)日:2014-11-05
申请号:CN201410401812.7
申请日:2014-08-15
Applicant: 曙光信息产业(北京)有限公司
Abstract: 本发明提供一种分布式系统中数据节点的安全管理方法,包括以下步骤:确定数据节点的物理状态和物理状态的转移路径;管理系统对数据节点的物理状态进行管理;不同物理状态下的数据节点对数据操作进行管理。本发明为所有的数据节点定义6个物理状态,保证了数据健康程度监控的及时性,以使用户得以及时得知整个分布式系统上每个节点上的数据健康状况;且数据节点的删除操作仅允许针对僵尸状态的数据节点进行,如果用户想要删除健康的数据节点,必须手动对其进行手动重建的操作,待其重建完成后方可删除,这样从根本上保证了分布式系统的数据安全性。
-
公开(公告)号:CN103530205A
公开(公告)日:2014-01-22
申请号:CN201310503495.5
申请日:2013-10-23
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F11/14
Abstract: 本发明公开了一种多副本中故障副本的处理方法和装置,其中,该处理方法包括:接收多副本中故障副本的故障信息;根据故障信息,通过当前主副本对故障副本进行数据同步。本发明通过当前主副本对故障副本进行数据同步,能够对故障副本进行修复,从而保证系统中多副本的一致性,扩展系统的容错能力,并且提高系统的可靠性。
-
公开(公告)号:CN102567442A
公开(公告)日:2012-07-11
申请号:CN201110326012.X
申请日:2011-10-25
Applicant: 曙光信息产业(北京)有限公司
IPC: G06F17/30
Abstract: 本发明中,元数据服务器由内核态模块和用户态守护进程两部分组成。这两个模块通过字符设备进行通信,当用户态收集到一批需要同步的文件后,会将文件句柄和修改区间传递给内核态的模块,由内核态的模块将这些修改数据传递给块设备,然后统一等待完毕后,再返回用户态进程。实验数据显示,这种由内核态模块集中进行文件同步的方式,能将文件同步的平均时间至少缩短一半,因而大大加快了前端元数据的处理能力。
-
-
-
-
-
-
-
-
-