-
公开(公告)号:CN116389110A
公开(公告)日:2023-07-04
申请号:CN202310348842.5
申请日:2023-03-30
Applicant: 济南浪潮数据技术有限公司
IPC: H04L9/40 , H04L67/566 , H04L67/563 , H04L67/5681 , H04L61/30
Abstract: 本发明公开了一种大数据存储服务端的权限管理方法、装置、系统及介质,涉及计算机领域,通过接收客户端发送的文件请求,文件请求包括处于大数据存储服务端可访问的目标服务端可使用的目标租户和/或目标命名空间的信息以及请求内容,再根据目标租户和/或目标命名空间的信息获取目标租户和/或目标命名空间的授权策略,根据目标租户和/或目标命名空间的授权策略确定客户端是否有权限进行请求内容,当客户端有权限进行请求内容时,将请求内容发送至目标服务端,以便目标服务端响应请求内容,实现了客户端对服务端中不同的租户和命名空间的精细化访问管理。
-
公开(公告)号:CN115859346A
公开(公告)日:2023-03-28
申请号:CN202211412709.3
申请日:2022-11-11
Applicant: 济南浪潮数据技术有限公司
IPC: G06F21/62 , G06F16/13 , G06F16/182
Abstract: 本发明涉及一种基于目录分区实现多租户的方法、系统、装置及介质。本发明在多租户模式下,创建租户根目录属性为真的第一目标根目录,根据租户在第一目标根目录下创建对应的租户工作目录属性为真的目标一级子目录;目标一级子目录仅对相应的租户可见可访问操作;在目标一级子目录下根据相应租户下的用户创建命名空间工作目录属性为真的目标二级子目录,目标二级子目录仅对相应的用户可见可访问操作以实现不同用户之间的资源隔离;用户在相应的目标二级子目录下可任意创建普通目录属性为真的子目录用于实现文件管理索引。本申请利用文件系统目录的目录分区进行租户和用户之间资源隔离,以满足多租户多用户需求。
-
公开(公告)号:CN115795502A
公开(公告)日:2023-03-14
申请号:CN202211446994.0
申请日:2022-11-18
Applicant: 济南浪潮数据技术有限公司
Abstract: 本申请公开了一种分布式文件系统的权限管理方法、系统及相关组件,涉及分布式文件系统领域,该权限管理方法包括:当接收到用户发送的ACL设置命令,解析ACL设置命令中的待转换参数,待转换参数对应HDFS数据格式;将各个待转换参数分别转换为posix数据格式的权限设置参数;基于权限设置参数对分布式文件系统进行权限设置。本申请能够实现存算分离场景下对分布式文件系统的文件和目录的用户访问的精细控制,提高现有的存算分离场景下的分布式文件系统的数据安全性。
-
公开(公告)号:CN115629711A
公开(公告)日:2023-01-20
申请号:CN202211348879.X
申请日:2022-10-31
Applicant: 济南浪潮数据技术有限公司
IPC: G06F3/06
Abstract: 本申请公开了一种packet包写对齐方法、系统、装置及介质,应用于数据传输领域,通过获取由客户端发送的packet包,判断在将packet包加入当前下刷批后,当前下刷批是否超过下刷阈值,若超过,则将packet包进行逻辑切分并标记为已被切分,将packet包小于下刷阈值的部分加入当前下刷批,将剩余部分加入下一个下刷批;若不超过,则将packet包标记为未被切分,并将packet包加入当前下刷批,判断已加入等待下刷队列的当前下刷批是否满足下刷条件,若满足,则将当前下刷批进行下刷。根据下刷阈值对其切分处理,对不符合下刷阈值部分进行分批处理,提升写入磁盘与读取数据的速度,减少数据乱码、错误的发生。
-
公开(公告)号:CN113626299A
公开(公告)日:2021-11-09
申请号:CN202110835163.1
申请日:2021-07-23
Applicant: 济南浪潮数据技术有限公司
IPC: G06F11/34 , G06F16/16 , G06F16/182
Abstract: 本发明公开一种分布式文件系统的并行性能评估方法和装置,其中,该分布式文件系统的并行性能评估方法包括:当侦测到分布式文件系统的文件操作时,获取每种文件操作类型对应的IO并行数量信息;根据文件操作类型对应的唯一标识,统计每种文件操作类型对应的IO运行时间信息;根据IO并行数量信息和IO运行时间信息,评估分布式文件系统的并行性能。本发明的技术方案能解决现有技术中分布式文件系统的并行性能检测误差较大的问题。
-
公开(公告)号:CN113590546A
公开(公告)日:2021-11-02
申请号:CN202110742686.1
申请日:2021-06-30
Applicant: 济南浪潮数据技术有限公司
IPC: G06F16/16 , G06F16/182
Abstract: 本申请涉及的目录删除方法、装置及存储介质。其中方法包括:在系统文件目录下创建第二目录,将待删除目录的数据移动到所述第二目录;在待删除目录的元数据所处的元数据服务器中创建第一目录,将待删除目录的元数据移动到所述第一目录;客户端将全部元数据服务器的第一目录缓存在本地指定位置,根据所述指定位置待删除目录的元数据内容,索引到所述第二目录下的待删除目录的数据,并执行删除操作删除所述待删除目录的数据;待删除目录的数据删除后,所述客户端删除本地指定位置以及元数据服务器第一目录下相应待删除目录的元数据。应用本申请元数据服务器之间不会因删除目录而产生元数据迁移,保证分布式文件系统的整体性能。
-
公开(公告)号:CN120011326A
公开(公告)日:2025-05-16
申请号:CN202510111891.6
申请日:2025-01-23
Applicant: 济南浪潮数据技术有限公司
IPC: G06F16/172 , G06F16/182 , G06F16/16 , G06F16/18 , G06F16/14
Abstract: 本发明涉及计算机技术领域,公开了一种文件存储方法、读取方法、装置、设备及介质,该方法包括:获取待存储文件以及与待存储文件对应的标识信息,生成与待存储文件对应的元数据信息,确定传输待存储文件的传输协议,当确定为目标协议时,确定分布式存储系统中是否存在与标识信息对应的文件。当确定未存在对应文件时,创建逻辑头文件,识别多版本功能是否开启,当确定该功能处于开启状态时,生成与待存储文件对应的版本信息,将该版本信息配置为首个版本信息,将元数据信息、标识信息,以及首个版本信息加入到逻辑头文件中,以及将待存储文件在分布式存储系统中完成存储操作。该方法减少了一个元数据信息文件,增加了整个集群的可支持文件量级。
-
公开(公告)号:CN113590573B
公开(公告)日:2025-02-14
申请号:CN202110714798.6
申请日:2021-06-25
Applicant: 济南浪潮数据技术有限公司
IPC: G06F16/182 , G06F9/54
Abstract: 本发明公开了一种分布式集群的请求的路由方法和装置,方法包括:从客户端接收分布式文件系统的服务请求,从服务请求中解析出客户端信息并将客户端信息记录到日志;基于服务请求在分布式文件系统确定对应的子集群,将服务请求转发到子集群并将子集群的连接信息记录到日志;从子集群接收针对服务请求的反馈信息,将反馈信息与对应于反馈信息的客户端信息相关联地记录到日志;响应于反馈信息包括服务执行失败,而将对应于反馈信息的客户端信息基于连接信息而发送到子集群。本发明能够便于快速定位服务失败和输入输出阻塞,并且有助于分析联邦集群的负载均衡,提高分布式集群的可用性。
-
公开(公告)号:CN113688107B
公开(公告)日:2025-01-24
申请号:CN202110872163.9
申请日:2021-07-30
Applicant: 济南浪潮数据技术有限公司
IPC: G06F16/172 , G06F16/182 , G06F3/06 , G06F5/06
Abstract: 本发明公开一种分布式文件系统元数据缓存方法、装置、终端及存储介质,设计三级缓存机制,进行挑选缓存,将将要被使用的元数据放置在一、二级缓存队列,使用率低的元数据放置在三级缓存队列,淘汰时从三级缓存队列的缓存时间最久的元数据进行淘汰,从而保留将要被使用的元数据,保证元数据的命中率,减少内存占用,缩短元数据访问IO路径,降低网络通信压力,磁盘访问IO压力,并设置合理的缓存量阈值,在内存可控的基础上有效实现元数据缓存性能的最优化。
-
公开(公告)号:CN119130076A
公开(公告)日:2024-12-13
申请号:CN202411354645.5
申请日:2024-09-26
Applicant: 济南浪潮数据技术有限公司
IPC: G06Q10/0631 , G06Q50/10
Abstract: 本发明涉及计算机技术领域,公开了一种增值服务处理系统、方法及存储介质,该系统包括:第一增值服务客户端,用于当接收到对象通过终端设备发送的业务请求后,匹配与业务请求对应的消息传输通道;通过消息传输通道,将业务请求发送至主增值服务器;主增值服务器,用于根据业务请求确定业务类型;根据业务类型,从主增值服务器中包括的多个增值业务处理模块中选取目标增值业务处理模块处理业务请求;并反馈与业务请求对应的响应信息至增值服务器客户端。通过将业务请求分配到不同的增值业务处理模块中,提高系统的并发处理能力和可靠性。集中化的进程服务器,有效利用计算和存储资源,避免重复利用资源的情况发生,从而提高整体系统的效率。
-
-
-
-
-
-
-
-
-