-
公开(公告)号:CN115002072A
公开(公告)日:2022-09-02
申请号:CN202210612273.6
申请日:2022-05-31
Applicant: 济南浪潮数据技术有限公司
IPC: H04L61/3015 , H04L61/4511 , H04L61/103
Abstract: 本发明公开了一种基于JMX的获取数据方法、装置及介质,适用于虚拟机监控技术领域。通过获取当前请求域名查询得到公用命名空间,若该域名为已注册的域名,则通过轮询命名空间集合,也就是在多个命名空间内获取目标命名空间,若未查询到或者若该域名不为已注册的域名,则将公用命名空间作为目标命名空间。将现有的一个命名空间划分为多个命名空间,由现有的一个域名访问一个命名空间模式变为当前请求域名访问多个命名空间模式实现“多对多”的获取方式,降低对命名空间访问时获取数据的耦合性,同时提高访问数据的速度,多对多的模式更具有灵活性,进一步提高用户的体验感。
-
公开(公告)号:CN116431608A
公开(公告)日:2023-07-14
申请号:CN202310416383.X
申请日:2023-04-13
Applicant: 济南浪潮数据技术有限公司
Abstract: 本申请公开了一种数据迁移方法、装置、设备及存储介质,涉及数据迁移技术领域,包括:获取待迁移HBase集群中待迁移的数据表,得到待迁移数据表列表;根据所述待迁移数据表列表创建新快照,并将所述新快照迁移至目标HBase集群中;对位于所述目标HBase集群的所述新快照中的所述待迁移数据表列表对应的数据内容进行恢复,得到恢复后的数据表;对所述恢复后的数据表进行数据校验,若校验通过则表明所述待迁移数据表列表迁移成功。本申请可以利用HBase集群自身的功能对集群进行迁移,减少集群业务中断时间,在迁移时能够保证数据的可用性,同时节约了成本,保证了数据的安全。
-
公开(公告)号:CN119248732A
公开(公告)日:2025-01-03
申请号:CN202411170684.X
申请日:2024-08-23
Applicant: 济南浪潮数据技术有限公司
IPC: G06F16/174 , G06F16/182
Abstract: 本发明实施例提供了一种分布式文件系统的回收站清理方法、装置、设备和介质,该方法包括服务器向客户端发送扫描任务;扫描任务用于指示客户端扫描服务器的回收站数据目录中对应的目标数据目录,确定目标数据目录中的待删除数据;接收客户端发送的待删除数据的目录,将待删除数据的目录放入待删除数据队列;根据待删除数据队列生成删除任务,向客户端发送删除任务;删除任务用于指示客户端删除指定的待删除数据的目录对应的数据。本发明实施例可以显著减少了在进行回收站清理工作时,网络中传输的数据量,从而节省了带宽资源并降低了网络拥塞的风险。
-
公开(公告)号:CN117112524A
公开(公告)日:2023-11-24
申请号:CN202311153235.X
申请日:2023-09-07
Applicant: 济南浪潮数据技术有限公司
IPC: G06F16/18 , G06F16/17 , G06F16/172 , G06F16/16
Abstract: 本发明涉及审计日志技术领域,公开了基于命名空间的审计日志存储方法、装置、设备及介质,基于命名空间的审计日志存储方法包括:创建命名空间;获取操作列表中需要审计的第一操作;将第一操作存储于命名空间中;获取目标操作,读取目标操作对应的命名空间;判断目标操作是否为第一操作;若目标操作是第一操作,则对目标操作进行审计日志存储。本发明选择性的对审计日志进行存储,降低审计日志占用的存储空间。
-
公开(公告)号:CN116389110A
公开(公告)日:2023-07-04
申请号:CN202310348842.5
申请日:2023-03-30
Applicant: 济南浪潮数据技术有限公司
IPC: H04L9/40 , H04L67/566 , H04L67/563 , H04L67/5681 , H04L61/30
Abstract: 本发明公开了一种大数据存储服务端的权限管理方法、装置、系统及介质,涉及计算机领域,通过接收客户端发送的文件请求,文件请求包括处于大数据存储服务端可访问的目标服务端可使用的目标租户和/或目标命名空间的信息以及请求内容,再根据目标租户和/或目标命名空间的信息获取目标租户和/或目标命名空间的授权策略,根据目标租户和/或目标命名空间的授权策略确定客户端是否有权限进行请求内容,当客户端有权限进行请求内容时,将请求内容发送至目标服务端,以便目标服务端响应请求内容,实现了客户端对服务端中不同的租户和命名空间的精细化访问管理。
-
公开(公告)号:CN115629711A
公开(公告)日:2023-01-20
申请号:CN202211348879.X
申请日:2022-10-31
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本申请公开了一种packet包写对齐方法、系统、装置及介质,应用于数据传输领域,通过获取由客户端发送的packet包,判断在将packet包加入当前下刷批后,当前下刷批是否超过下刷阈值,若超过,则将packet包进行逻辑切分并标记为已被切分,将packet包小于下刷阈值的部分加入当前下刷批,将剩余部分加入下一个下刷批;若不超过,则将packet包标记为未被切分,并将packet包加入当前下刷批,判断已加入等待下刷队列的当前下刷批是否满足下刷条件,若满足,则将当前下刷批进行下刷。根据下刷阈值对其切分处理,对不符合下刷阈值部分进行分批处理,提升写入磁盘与读取数据的速度,减少数据乱码、错误的发生。
-
公开(公告)号:CN117331905A
公开(公告)日:2024-01-02
申请号:CN202311297858.4
申请日:2023-10-08
Applicant: 济南浪潮数据技术有限公司
IPC: G06F16/182 , G06F16/172 , G06F16/13
Abstract: 本发明涉及分布式文件系统技术领域,公开了一种分布式文件系统的信息处理方法、读写方法及设备。名称节点可以根据客户端的元数据请求,确定出待操作文件的文件类型以及第一块池标识,确定与待操作文件的文件类型对应的目标读写方式,即与待操作文件的文件类型对应的较高效率的读写方式,之后构建包括有目标读写方式的块池信息,并返回给客户端,以使客户端根据块池信息中的目标读写方式和第一块池标识执行读写操作,有效保障与待操作文件的文件类型对应的业务场景的读写效率。本发明对于不同的文件类型即不同的业务场景,均可以确定出相应的读写方式并根据确定出的读写方式来执行读写操作,可以有效保障不同业务场景中的读写效率。
-
公开(公告)号:CN117077176A
公开(公告)日:2023-11-17
申请号:CN202311117396.3
申请日:2023-08-31
Applicant: 济南浪潮数据技术有限公司
Abstract: 本发明属于分布式存储领域,具体涉及一种分布式存储鉴权方法、系统、设备及介质。其中方法包括:响应于收到业务操作请求,判断是否对业务操作请求采用联合鉴权机制;响应于判断为是,先通过第一鉴权组件对业务操作请求进行鉴权,并在第一鉴权组件的鉴权结果为通过后,将鉴权结果添加到处理所述业务操作请求的业务处理线程的描述信息中;响应于线程的描述信息发生变更,调用第二鉴权组件对业务操作请求进行鉴权,并在所述第二鉴权组件鉴权通过后通过所述业务处理线程执行所述业务操作请求。通过本发明提出的一种分布式存储鉴权方法,无需改变原生的鉴权机制,可有效解决在采用两种鉴权方式的情况下的鉴权结果冲突问题。
-
公开(公告)号:CN116382565A
公开(公告)日:2023-07-04
申请号:CN202310073533.1
申请日:2023-01-30
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本发明公开了一种HDFS数据落盘方法、装置、HDFS服务器及计算机可读存储介质,涉及数据处理技术领域,该方法包括:HDFS服务器获取客户端设备发送的待存储数据;判断待存储数据是否属于目标文件块;其中,目标文件块为HBase WAL日志的文件块;若是,则将待存储数据加入到下刷队列和应答队列;若否,则将待存储数据加入到下刷队列,并在目标文件块下刷完成后,将待存储数据加入到应答队列;本发明通过判断待存储数据是否属于目标文件块,实现对HBase WAL日志的识别,使WAL日志的数据能够在下刷落盘时返回应答信息,实现基于HBase WAL机制的直接应答顺序下刷的数据落盘,提高了HBase数据存入的速度。
-
公开(公告)号:CN118158239A
公开(公告)日:2024-06-07
申请号:CN202410340585.5
申请日:2024-03-22
Applicant: 济南浪潮数据技术有限公司
IPC: H04L67/1097 , H04L41/0894
Abstract: 本申请提供了一种分布式存储系统的数据节点选择方法、装置、设备及介质,涉及存储系统技术领域,包括:名称节点接收客户端发出的读写请求,从预先配置的多个数据节点选择策略中,确定与读写请求的用户业务场景所适配目标数据节点选择策略,并按照目标节点选择策略选择目标数据节点,得到目标数据节点列表,根据目标数据节点列表,向客户端发送客户端所需的数据节点列表,以使客户端请求所需的数据节点列表中的数据节点处理读写请求。通过在名称节点中配置多个与用户业务场景相适配的数据节点选择策略,针对不同的用户业务场景选择不同的数据节点选择策略,能够提升分布式存储系统的可用性、易用性和数据负载均衡能力。
-
-
-
-
-
-
-
-
-