一种基于联邦集群的数据库系统非对称部署的构建方法

    公开(公告)号:CN104504128B

    公开(公告)日:2017-09-12

    申请号:CN201410854077.5

    申请日:2014-12-31

    Abstract: 本发明提供一种基于联邦集群的数据库系统非对称部署的构建方法,包括以下步骤:S1.把基于对称部署(所有节点均部署gcware,coordinator,gnode)的分布式数据库集群系统按照功能拆分成gcware,coordinator,gnode三个子集群;S2.三个子集群gcware,coordinator,gnode组成的联邦集群间相互协作对外提供服务,gcware集群提供一致性服务;coordinator集群提供了集群入口也就是接收用户SQL的高可用性,集群元数据的高可用性,存储和计算集群的资源管理和任务调度;gnode集群提供了基础的数据存储和计算服务。这种设计解决了目前市场上主流的分布式数据库集群系统vertica,GreenPlum架构存在的问题,结构简洁,提高了稳定性,降低了操作复杂度,降低了集群元数据出现不一致的风险。

    一种全文索引数据的创建方法及装置

    公开(公告)号:CN106776746A

    公开(公告)日:2017-05-31

    申请号:CN201611029689.6

    申请日:2016-11-14

    CPC classification number: G06F16/328

    Abstract: 本发明提供了一种全文索引数据的创建方法及装置,所述方法包括:并行对文档进行分词,记录单词位置和单词标记;按照用于记录单词位置和单词标记的存储数据块顺序对所述分词的结果依次进行封装,生成封装块和封装块的索引,所述索引包括:词编号及数量;根据所述索引对单词进行排序;对所述封装块进行拆包,对相同的单词进行归类。可以有效利用计算资源,减少分词时间,并可对并行分词结果排序处理,准确的得到索引数据。

    一种单机数据库数据的查询方法及装置

    公开(公告)号:CN106557562A

    公开(公告)日:2017-04-05

    申请号:CN201611008834.2

    申请日:2016-11-14

    CPC classification number: G06F17/3048 G06F17/30362

    Abstract: 本发明提供了一种单机数据库数据的查询方法及装置,其中,所述方法包括:设置多个主机与存储数据的存储器连接,并缓存所述数据;所述主机接收客户端的查询情求,并根据所述查询请求从缓存中获取查询数据,并返回所述客户端。节点可以分解查询压力,有效提高查询响应速度。使用单机数据库就可以实现,简单便捷,并可共享同一套存储架构,节约磁盘空间。

    使用单隐层解决非线性问题的BP神经网络分类方法

    公开(公告)号:CN106408085A

    公开(公告)日:2017-02-15

    申请号:CN201610777655.9

    申请日:2016-08-31

    Inventor: 崔维力 赵伟 李淼

    CPC classification number: G06N3/08 G06K9/6267

    Abstract: 本发明提出了一种使用单隐层解决非线性问题的BP神经网络分类方法及分类器,包括:建立BP神经网络模型,其中,所述BP神经网络模型采用单隐层前馈网络;对BP神经网络模型的输入端的权重参数进行优化;输入数据至所述BP神经网络模型与优化后的权重参数进行联合计算,最终在所述BP神经网络模型的输出端实现对数据的分类识别。本发明可以减小使用多隐层解决非线性可分问题所带来的资源消耗大,计算代价大等问题,提高神经网络的工作效率。

    一种分布式数据库的扩容方法及装置

    公开(公告)号:CN106407308A

    公开(公告)日:2017-02-15

    申请号:CN201610777611.6

    申请日:2016-08-31

    Abstract: 本发明提供了一种分布式数据库的扩容方法及装置,所述方法包括:集群安装新节点,所述新节点与原有节点为倍数关系;建立新节点与原有节点的映射关系;将原有节点的数据复制至映射关系对应的新节点,构造新的hash map;新节点和原有节点按照所述hash map进行数据重分布;更新集群中节点中的表。减少了节点数据的计算量,实现了强扩容性能,并能快速释放删除行的存储空间。

    应用于特殊数据的存储方法及装置

    公开(公告)号:CN106383844A

    公开(公告)日:2017-02-08

    申请号:CN201610777665.2

    申请日:2016-08-31

    Inventor: 崔维力 赵伟 李淼

    CPC classification number: G06F16/1744 G06F16/221

    Abstract: 本发明提出了一种应用于特殊数据的存储方法及装置,包括:检测时间序列数据库中的数据类型;判断时间序列数据库中的适合使用列存储的数据类型;对判断的适合使用列存储的数据类型对应的数据,采用列存储方式将数据进行存储操作,其中,在列存储操作过程中,同一列的数据类型相同,采用相同的高效压缩编码算法对数据进行压缩,并采用批处理对列数据进行查询执行。本发明采用列式存储方式支持复杂的嵌套类型的数据,同时能够提高时间序列数据库的数据查询效率,磁盘存储效率。

    一种分布式数据库及其数据运算的管理方法

    公开(公告)号:CN106250566A

    公开(公告)日:2016-12-21

    申请号:CN201610777671.8

    申请日:2016-08-31

    Abstract: 本发明提供了一种分布式数据库及其数据运算的管理方法。其中,所述分布式数据库包括:管理集群,用于接收用户的指令,并解析优化所述指令,生成执行计划和调度;基础运算层集群,用于接收管理集群接收执行计划,基于分布在节点上的业务表进行运算;汇总结果运算层集群,用于接收来自基础运算层集群分发的数据进行运算。在数据不具有本地性时,可以实现汇总和交互数据,减少节点之间网络资源的使用,并可使得分布式数据库运算节点资源更加均衡。

    分布式数据库系统准实时的双活方法

    公开(公告)号:CN105574127A

    公开(公告)日:2016-05-11

    申请号:CN201510932895.7

    申请日:2015-12-12

    CPC classification number: G06F16/273 G06F11/1461 G06F16/27

    Abstract: 本发明公开了一种分布式数据库系统准实时的双活方法,包括内嵌在外部应用作业中并接受作业调度的调度模块、用于在作业修改数据完成后实现主副集群间数据复制的数据复制模块、用于实现数据准实时数据增量同步的数据同步模块,方法包括如下步骤:步骤A、建立一个与主机群分片数相同的备份集群;步骤B、调度模块根据主机群分片内文件块以增量方式进行数据调度;步骤C、数据复制模块根据数据调度模块内数据以增量方式进行文件块复制;步骤D、数据同步模块将数据复制模块内增量复制的数据向备份集群内进行同步调度和同步数据更改。本发明可快速的对主机分布式数据库间的数据同步,缩短灾备的恢复时间,达到准实时的灾备,适用性好,实用性强。

    MPP数据库与Hadoop集群数据互通方法、工具及实现方法

    公开(公告)号:CN104572895A

    公开(公告)日:2015-04-29

    申请号:CN201410820059.5

    申请日:2014-12-24

    CPC classification number: G06F17/30557

    Abstract: 本发明提供一种MPP数据库与Hadoop集群数据互通方法、工具及实现方法,包括利用数据互通工具直接进行MPP数据库与Hadoop集群之间数据的互通的方法以及通过TXT中转进行数据互通的方法,数据由MPP数据库直接导出(导入)至Hadoop集群,无需通过MPP数据库与Hadoop集群之外的存储单元中转,从而使得导出过程更加高效,如需Hadoop集群进行数据的二次处理,可选择TXT格式中转方式。本发明能够解决MPP数据库和Hadoop业务间数据无法互通的问题,实现MPP数据库和Hadoop两种业务平台的混搭。

Patent Agency Ranking