-
公开(公告)号:CN115525218A
公开(公告)日:2022-12-27
申请号:CN202211000139.7
申请日:2022-08-19
Applicant: 济南浪潮数据技术有限公司
Inventor: 荣章权
IPC: G06F3/06
Abstract: 本申请公开了一种分布式存储系统的文件读操作方法、装置及介质,涉及通信领域,为了提高分布式存储系统下读操作的效率,本申请通过接收读操作请求;根据读操作请求申请内存空间;将读操作请求和内存空间的地址信息包装成一个读操作消息;将读操作消息以远程内存直接访问的通信形式发送至对象存储设备,以使所述对象存储设备根据所述读操作消息将请求数据写入所述内存空间。客户端将包含读操作请求的控制数据和内存空间的地址信息的读操作消息以远程内存直接访问的通信形式发送至对象存储设备,对象将请求数据写入指定的内存空间,实现数控分离,减少了数据在内存间的拷贝次数,并且通过应用远程内存直接访问技术提高了网络传输效率。
-
公开(公告)号:CN117076087A
公开(公告)日:2023-11-17
申请号:CN202311119268.2
申请日:2023-08-31
Applicant: 济南浪潮数据技术有限公司
Inventor: 荣章权
IPC: G06F9/48 , G06F16/182 , G06F16/17
Abstract: 本发明提供一种单流读写加速的方法、系统、设备和存储介质,方法包括:响应于打开待进行读写操作的文件,将拷贝子线程组与读写进程绑定;响应于对所述文件进行读写操作,通过所述拷贝子线程组将数据从用户态地址拷贝到页上或者从页上拷贝到用户态地址上;以及响应于关闭完成读写操作的所述文件,将所述拷贝子线程组与所述读写进程解绑。本发明使用多个内核态线程代替传统的分布式存储在主线程中完成数据拷贝的方式,从而降低拷贝所花费的时间,进而提升内核客户端单流读写的性能。
-
公开(公告)号:CN119127903A
公开(公告)日:2024-12-13
申请号:CN202411356755.5
申请日:2024-09-26
Applicant: 济南浪潮数据技术有限公司
IPC: G06F16/23 , G06F16/84 , G06F16/2455
Abstract: 本申请实施例提供了一种数据的更新方法和装置、存储介质及程序产品,涉及数据处理领域,该方法包括:响应于数据更新请求,获取第一数据;将第一数据存储至缓存区域中,并为存储在缓存区域中的第一数据创建与内存区域之间的映射关系,得到映射地址;在缓存区域中存储的第一数据达到数据下刷条件的情况下,将携带有映射地址的数据下刷请求发送给存储服务节点,其中,数据下刷请求用于请求将第一数据存储至存储服务节点中,存储服务节点用于利用映射地址访问内存区域,并通过映射关系获取第一数据,存储服务节点还用于在获取到第一数据之后将第一数据写入至存储服务节点中。采用上述方案,解决了数据处理的问题。
-
公开(公告)号:CN117193645A
公开(公告)日:2023-12-08
申请号:CN202311167075.4
申请日:2023-09-11
Applicant: 济南浪潮数据技术有限公司
Inventor: 荣章权
IPC: G06F3/06
Abstract: 本发明涉及存储技术领域,公开了数据处理方法、装置、计算机设备及存储介质。当接收到操作指令时,确定操作指令的类型。根据操作指令的类型,生成操作请求,其中,操作请求中携带有待操作数据以及与待操作数据对应的第一起始字段位置和第一长度。分别确定第一起始字段位置和第一长度是否是纠删条带的长度的整数倍。当第一起始字段位置和/或第一长度不是纠删条带的长度的整数倍时,根据第一起始字段位置、第一长度、纠删条带的长度和数控分离准则,对待操作数据进行调整,生成新的操作数据,其中,新的操作数据中至少存在部分数据满足数控分离准则。根据新的操作数据,执行与操作指令对应的数据处理操作。本发明可以提高数据处理效率。
-
公开(公告)号:CN116450039A
公开(公告)日:2023-07-18
申请号:CN202310416189.1
申请日:2023-04-13
Applicant: 济南浪潮数据技术有限公司
Inventor: 荣章权
IPC: G06F3/06 , G06F11/14 , H04L67/06 , H04L67/025 , H04L41/0896
Abstract: 本申请公开了一种文件写入方法、装置、设备及存储介质,涉及存储技术领域,包括:当内核客户端向集群端的对象存储设备发送出封装有物理页的文件写入请求时,判断文件写入请求中封装的物理页中的数据是否满足与内核客户端的物理页大小对齐的条件;若满足,则申请基于RDMA协议的内存池,并将数据从文件写入请求封装的物理页中以拷贝至内存池中;将虚拟内存地址映射为基于RDMA协议的内存池的物理内存地址,并将物理内存地址编码至文件写入请求的控制流中;将文件写入请求发送至集群端的对象存储设备中。本申请利用RDMA技术和数控分离架构,能够减少数据在各对象存储设备之间的转发,从而减少集群端的数据转发占用的网络带宽,提高存储系统的读写性能。
-
-
-
-