-
公开(公告)号:CN105550319A
公开(公告)日:2016-05-04
申请号:CN201510931307.8
申请日:2015-12-12
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06F17/30
CPC classification number: G06F16/2386 , G06F16/2315
Abstract: 本发明公开了一种集群一致性服务高并发下持久化的优化方法,主要涉及分布式计算领域。包括:在节点处采用单独的持久化线程,用于实现持久化并回复客户端;持久化线程的辅助队列,辅助队列中包含了所有要持久化的数据和回应客户端所需要的链接及返回结果;在节点处采用一致性协议实现线程,用于将更新后的一致性信息和回应客户端的函数指针放入持久化线程的辅助队列的尾部,并向持久化线程发送持久化消息。本发明的有益效果在于:它能够及时实现持久化,能够保证集群一致性服务程序的响应速度,能够避免并发性下降及集群分裂,能够保证集群运行效率。
-
公开(公告)号:CN105550319B
公开(公告)日:2019-06-25
申请号:CN201510931307.8
申请日:2015-12-12
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06F16/23
Abstract: 本发明公开了一种集群一致性服务高并发下持久化的优化方法,主要涉及分布式计算领域。包括:在节点处采用单独的持久化线程,用于实现持久化并回复客户端;持久化线程的辅助队列,辅助队列中包含了所有要持久化的数据和回应客户端所需要的链接及返回结果;在节点处采用一致性协议实现线程,用于将更新后的一致性信息和回应客户端的函数指针放入持久化线程的辅助队列的尾部,并向持久化线程发送持久化消息。本发明的有益效果在于:它能够及时实现持久化,能够保证集群一致性服务程序的响应速度,能够避免并发性下降及集群分裂,能够保证集群运行效率。
-
公开(公告)号:CN104375906B
公开(公告)日:2017-06-13
申请号:CN201410664300.X
申请日:2014-11-19
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06F11/14
Abstract: 本发明提供了一种基于文件系统的大规模备份数据快速校验方法:包括:备份索引文件;所述备份索引文件包括实际备份数据的文件夹和文件块;所述文件夹包括文件夹的路径;所述文件块包括文件块所在文件的路径、起始偏移、文件块大小和校验值。本发明的有益效果为:以文件块为最小备份单位,无需关注整个文件的校验值;这种备份数据的组织形式,有利于使用多核CPU资源进行并行校验;校验数据时,除校验所有文件块以外,仅需校验文件大小的总和以及文件夹的存在情况,即可确保备份数据严格正确,避免了大规模的归并运算。
-
公开(公告)号:CN106372165A
公开(公告)日:2017-02-01
申请号:CN201610777882.1
申请日:2016-08-31
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06F17/30
CPC classification number: G06F16/256 , G06F16/27
Abstract: 本发明提供了一种基于totem协议的集群的leader选取方法及装置,其中,所述方法包括:获取集群中节点的epoch数和transactionid数;根据所述epoch数和transactionid数选取leader节点。可以在正常或者异常情况下,都可选择出具有有完整的、正确的数据的节点作为leader节点。
-
公开(公告)号:CN105549909B
公开(公告)日:2019-03-12
申请号:CN201510926027.8
申请日:2015-12-12
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06F3/06
Abstract: 本发明公开了一种集群序列类一致性信息持久化的优化方法,在对集群序列类一致性信息进行持久化时,按照一定的持久化间隔,选取集群序列类一致性信息中的部分信息值进行持久化,即集群序列类一致性信息的当前持久化信息值设为N,持久化间隔设为extent,则只对信息值为N+n*extent的值进行持久化,n为非负整数。本发明的有益效果在于:对集群序列类一致性信息进行间隔持久化,减少了持久化频数,使得既能应对集群整体失效,又能提高持久化的效率,降低持久化代价。
-
公开(公告)号:CN105549909A
公开(公告)日:2016-05-04
申请号:CN201510926027.8
申请日:2015-12-12
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06F3/06
CPC classification number: G06F3/0619 , G06F3/0674
Abstract: 本发明公开了一种集群序列类一致性信息持久化的优化方法,在对集群序列类一致性信息进行持久化时,按照一定的持久化间隔,选取集群序列类一致性信息中的部分信息值进行持久化,即集群序列类一致性信息的当前持久化信息值设为N,持久化间隔设为extent,则只对信息值为N+n*extent的值进行持久化,n为非负整数。本发明的有益效果在于:对集群序列类一致性信息进行间隔持久化,减少了持久化频数,使得既能应对集群整体失效,又能提高持久化的效率,降低持久化代价。
-
公开(公告)号:CN104375906A
公开(公告)日:2015-02-25
申请号:CN201410664300.X
申请日:2014-11-19
Applicant: 天津南大通用数据技术股份有限公司
IPC: G06F11/14
Abstract: 本发明提供了一种基于文件系统的大规模备份数据快速校验方法:包括:备份索引文件;所述备份索引文件包括实际备份数据的文件夹和文件块;所述文件夹包括文件夹的路径;所述文件块包括文件块所在文件的路径、起始偏移、文件块大小和校验值。本发明的有益效果为:以文件块为最小备份单位,无需关注整个文件的校验值;这种备份数据的组织形式,有利于使用多核CPU资源进行并行校验;校验数据时,除校验所有文件块以外,仅需校验文件大小的总和以及文件夹的存在情况,即可确保备份数据严格正确,避免了大规模的归并运算。
-
-
-
-
-
-