-
公开(公告)号:CN106528833A
公开(公告)日:2017-03-22
申请号:CN201611033076.X
申请日:2016-11-14
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06F17/30
CPC classification number: G06F16/21 , G06F16/24552
Abstract: 本发明提供了一种MPP数据库数据动态重分布的方法及装置,其中,所述方法包括:在每个节点划分缓存空间,所述缓存空间用于缓存重分布数据;判断所述缓存空间是否包括动态重分布需求对应的数据,在所述缓存空间包括动态重分布需求对应的数据时,使用所述缓存空间中的所述数据。通过在本地设置缓存,并在重分布时优先使用缓存中的数据。减少MPP数据库集群节点间的通讯,提升本地化运算比例,从而提升集群整体性能。
-
公开(公告)号:CN106528829A
公开(公告)日:2017-03-22
申请号:CN201611029563.9
申请日:2016-11-14
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06F17/30
CPC classification number: G06F16/2315
Abstract: 本发明提供了一种海量数据的更新方法及装置。其中,所述方法包括:将所述更新线程按照所述系统的处理能力分为多个子线程;将待更新数据按照所述子线程的处理能力分为多个区块,并控制每个子线程更新对应的区块。通过将更新线程按照处理能力分为多个子线程,并并行对数据区块同时进行更新处理,可以充分利用系统运算资源,减少了海量数据的更新处理时间。
-
公开(公告)号:CN106383846A
公开(公告)日:2017-02-08
申请号:CN201610777795.6
申请日:2016-08-31
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06F17/30
CPC classification number: G06F16/254
Abstract: 本发明提供一种分布式数据库系统数据的加载方法及装置,其中,所述分发方法包括:管理节点接收用户加载数据的指令,所述指令包括加载参数;管理节点根据所述指令确定加载的数据量,并确定加载数据的节点数量;根据加载的数据量和所述加载数据的节点数量对加载数据进行分配,并将分配指令下发给运算节点,以使得运算节点根据所述分配指令。完成数据的加载。可以将加载任务发送至计算节点,以使得计算节点加载数据。解决了文件服务器成为加载瓶颈的问题。
-
-
公开(公告)号:CN106372161A
公开(公告)日:2017-02-01
申请号:CN201610777612.0
申请日:2016-08-31
Applicant: 天津南大通用数据技术股份有限公司
CPC classification number: G06F9/5083 , G06F11/1448 , G06F16/27
Abstract: 本发明提供了一种分布式数据库数据备份分片部署方法及装置。其中,所述方法包括:确定数据备份分片数量;根据所述数据备份分片数量对数据备份分片进行部署。可以高效的部署分布式数据库的主数据分片与备份数据分片,以精妙设计的策略与算法去保证每台机器的数据分片数尽可能的平衡,并且针对不同备份分片的应用配置备份分片所存放的位置,保证每一个数据分片的高可靠性,最大限度的防止数据分片及其备份分片同时损坏,此外保证每一台机器的负载尽可能的均衡。
-
公开(公告)号:CN106372160A
公开(公告)日:2017-02-01
申请号:CN201610777439.4
申请日:2016-08-31
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06F17/30
CPC classification number: G06F16/27 , G06F16/2471 , G06F16/284
Abstract: 本发明提供了一种分布式数据库及管理方法,其中,所述数据库包括:所述分布式数据库包括一个或多个节点,所述节点用于存储有一个或多个数据对象,所述数据对象包含一个或多个表,所述表中包含数据;结构相同的所述数据对象属于同一个数据对象集合;所述数据对象具有数据对象标识,该数据对象标识用于区分同一数据对象集合中的各数据对象。可以对数据库节点进行有效管理。提高分布式数据库的效率。
-
公开(公告)号:CN106355250A
公开(公告)日:2017-01-25
申请号:CN201610777841.2
申请日:2016-08-31
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06N3/08
CPC classification number: G06N3/084
Abstract: 本发明提出了一种基于神经网络的判断隐蔽信道的优化方法及装置,该方法包括:建立BP神经网络模型;利用预设隐蔽信道集合对所述BP神经网络模型进行学习训练,训练得到最优权重参数,其中,所述预设隐蔽信道集合包括:伪隐蔽信道和真实隐蔽信道;将训练得到的最优权重参数添加到所述BP神经网络模型,以得到更新后的BP神经网络模型;利用更新后的BP神经网络模型对实际的包括伪隐蔽信道的隐蔽信道集合进行判断,以查找出真实隐蔽信道。本发明基于BP神经网络的反馈式学习方式,在可疑隐蔽信道的集合中找出真实隐蔽信道和伪隐蔽信道。
-
公开(公告)号:CN106354619A
公开(公告)日:2017-01-25
申请号:CN201610777766.X
申请日:2016-08-31
Applicant: 天津南大通用数据技术股份有限公司
CPC classification number: G06F11/3452 , G06F11/302
Abstract: 本发明提供一种测试数据库并发性能的系统,包括测试执行工具、资源采集工具、测试结果分析工具和数据库。一种测试数据库并发性能的系统,可以全面的测试数据库对于某个用例的各种资源的使用是否合理,为用户和数据库测试人员积累重要的性能数据,可以方便的分析出数据库的某项资源使用是否充分,是否存在性能瓶颈,能实现更准确、更高效地完成数据库性能测试的功能。
-
公开(公告)号:CN106250567A
公开(公告)日:2016-12-21
申请号:CN201610777673.7
申请日:2016-08-31
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06F17/30
Abstract: 本发明提供了一种分布式数据库系统中表连接数据分布方式的选择方法及装置。所述方法包括:判断表连接字段是否为hash分布列,如果为hash分布列,则直接下发至计算接单执行数据连接;如果不为hash分布列,则根据评估结果选择数据分布方式。通过对两种方式的运算量和响应时间的估算,从中选取最为合适的分布方式,用于提高表连接的性能。
-
公开(公告)号:CN105573751A
公开(公告)日:2016-05-11
申请号:CN201510927158.8
申请日:2015-12-12
Applicant: 天津南大通用数据技术股份有限公司
Abstract: 本发明提供一种商业智能中利用微服务将业务模型和应用分离成独立子系统的实现方法,包含如下步骤:1)将不同的业务模型进行分析归类;2)将同类型的业务模型,独立成微型服务或应用;3)将独立的微型服务或应用进行独立的发布、部署、维护。本发明方法具有的优点和积极效果是:使商业智能中不同业务模型、不同业务应用服务之间解耦合,服务微小化、应用轻量化、业务和功能定制化。
-
-
-
-
-
-
-
-
-