-
公开(公告)号:CN116095098B
公开(公告)日:2024-04-09
申请号:CN202211502503.X
申请日:2022-11-28
Applicant: 华南农业大学 , 云和恩墨(北京)信息技术有限公司
IPC: H04L67/1097 , H04L67/1074
Abstract: 本申请公开了一种数据的分布式存储方法及装置。其中,该方法包括:主服务器获取客户端发送的更新数据,并将包括更新数据的第一消息发送至各个从服务器,通过各个从服务器中的目标从服务器对更新数据进行存储,其中,目标从服务器为存储更新数据对应的原始数据分片的服务器,主服务器和全部从服务器共同存储k个原始数据分片,全部从服务器存储m个原始校验分片,k和m为正整数;当主服务器收到全部从服务器发送的k-1个第二消息时,向客户端发送第三消息。本申请解决了由于现有的数据分布式存储方法无法在保持服务器活性的同时降低服务器存储数据的时延造成的服务器存储成本增加的技术问题。
-
公开(公告)号:CN116095098A
公开(公告)日:2023-05-09
申请号:CN202211502503.X
申请日:2022-11-28
Applicant: 华南农业大学 , 云和恩墨(北京)信息技术有限公司
IPC: H04L67/1097 , H04L67/1074
Abstract: 本申请公开了一种数据的分布式存储方法及装置。其中,该方法包括:主服务器获取客户端发送的更新数据,并将包括更新数据的第一消息发送至各个从服务器,通过各个从服务器中的目标从服务器对更新数据进行存储,其中,目标从服务器为存储更新数据对应的原始数据分片的服务器,主服务器和全部从服务器共同存储k个原始数据分片,全部从服务器存储m个原始校验分片,k和m为正整数;当主服务器收到全部从服务器发送的k-1个第二消息时,向客户端发送第三消息。本申请解决了由于现有的数据分布式存储方法无法在保持服务器活性的同时降低服务器存储数据的时延造成的服务器存储成本增加的技术问题。
-
公开(公告)号:CN119718766A
公开(公告)日:2025-03-28
申请号:CN202411740340.8
申请日:2024-11-29
Applicant: 云和恩墨(北京)信息技术有限公司
IPC: G06F11/10
Abstract: 本申请公开了一种基于纠删码的日志提交和数据更新方法、设备及介质,该方法可以应用于服务器集群的领导节点,先接收待写入的数据分片,然后获取包含数据分片的更新信息的日志数据,接着再确认每个数据分片对应的目标分片所属的节点,并将日志数据发送至相应节点。在接收到来自节点的用于表征日志数据被正确接收的确认信息之后,可以根据这些日志数据对节点的目标分片进行增量更新。本申请实施例采用了增量更新策略,能够有效缓解写放大问题,并提高数据更新的效率。
-
公开(公告)号:CN118151848A
公开(公告)日:2024-06-07
申请号:CN202410256449.8
申请日:2024-03-06
Applicant: 云和恩墨(北京)信息技术有限公司
IPC: G06F3/06
Abstract: 本申请公开了一种纠删码分布式数据存储中的领导节点的确定方法及装置,涉及分布式数据存储领域,该纠删码分布式数据存储中的领导节点的确定方法包括:在分布式系统中的候选节点在预设时间内获取到Z个投票的情况下,通过所述候选节点确定所述候选节点为所述分布式系统中的领导节点,其中,Z=max((N+1)/2,k),N为所述分布式系统中的节点数,N=2F+1,N=k+m,k为数据的数据分片数,m为数据的校验分片数,F为正整数,k大于m。采用上述技术方案,解决了CRaft无法保障纠删码存储模式的实现。
-
-
-