公开(公告)号：CN116821054A

公开(公告)日：2023-09-29

申请号：CN202310768404.4

申请日：2023-06-27

Applicant: 华侨大学

Inventor： 潘玉彪 ,  黄飞雄 ,  张惠臻

IPC: G06F16/13 ,  G06F16/172 ,  G06F16/182 ,  H04L67/1097

Abstract: 本发明公开了一种基于计算卸载机制的分布式键值存储系统，包括一个主节点和若干数据节点；所述计算卸载机制包括：在写入数据时保存键值文件和对应的IP地址至元数据中，形成键值文件‑IP映射表，进行层间合并时更新键值文件‑IP映射表，数据节点的部分键值文件重组为LSM树；对于要主节点执行的计算查询，根据元数据信息将键发送至对应的数据节点，再在对应的数据节点进行计算，将计算任务卸载至数据节点，数据节点处理完数据后，再将数据返回给主节点，由主节点进行汇总和筛选。本发明能够减少网络中数据的传输量，利用数据节点的计算能力，提升分布式键值存储系统的读写性能。

公开(公告)号：CN118277344B

公开(公告)日：2024-08-09

申请号：CN202410713361.4

申请日：2024-06-04

Applicant: 华侨大学

Inventor： 潘玉彪 ,  黄伟斌 ,  黄飞雄 ,  张惠臻

IPC: G06F16/16 ,  G06F16/182 ,  H04L67/1097 ,  H04L67/1004

Abstract: 本发明公开了一种分布式键值存储系统的存储节点层间合并方法及装置，涉及数据存储领域，包括：当获取到分布式键值存储系统的层间合并的操作指令，则判断层间合并的类型；若层间合并的类型为跨层级的层间合并，则采用负载均衡策略确定待执行层间合并操作的存储节点，在待执行层间合并操作的存储节点上读取到需进行层间合并的键值文件数据并进行层间合并操作，当层间合并操作完成后，待执行层间合并操作的存储节点将执行结果返回给主节点，并更新分布式键值存储系统的元数据信息；若层间合并的类型为同层级的层间合并，则在主节点上执行层间合并操作，本发明解决现有层间合并操作数据传输量大，数据写入效率低等问题。

公开(公告)号：CN118277344A

公开(公告)日：2024-07-02

申请号：CN202410713361.4

申请日：2024-06-04

Applicant: 华侨大学

Inventor： 潘玉彪 ,  黄伟斌 ,  黄飞雄 ,  张惠臻

IPC: G06F16/16 ,  G06F16/182 ,  H04L67/1097 ,  H04L67/1004

Abstract: 本发明公开了一种分布式键值存储系统的存储节点层间合并方法及装置，涉及数据存储领域，包括：当获取到分布式键值存储系统的层间合并的操作指令，则判断层间合并的类型；若层间合并的类型为跨层级的层间合并，则采用负载均衡策略确定待执行层间合并操作的存储节点，在待执行层间合并操作的存储节点上读取到需进行层间合并的键值文件数据并进行层间合并操作，当层间合并操作完成后，待执行层间合并操作的存储节点将执行结果返回给主节点，并更新分布式键值存储系统的元数据信息；若层间合并的类型为同层级的层间合并，则在主节点上执行层间合并操作，本发明解决现有层间合并操作数据传输量大，数据写入效率低等问题。