支持富元数据管理的文件系统及其实现富元数据服务的方法

    公开(公告)号:CN118708549A

    公开(公告)日:2024-09-27

    申请号:CN202410804851.5

    申请日:2024-06-21

    Abstract: 本发明公开了一种支持富元数据管理的文件系统,涉及电子数字数据处理领域,本发明的文件系统包括注册模块、命名空间查询模块、第一数据管理模块以及第二数据管理模块,其可作为FUSE框架的文件守护进程,借助FUSE框架为用户提供传统文件访问和新增的富元数据管理服务。富元数据管理服务一方面能够提供除POSIX语义以外的元数据的插入、读取、删除和展示操作;另一方面通过自动的包装器打包和挂载操作,将具有相同元数据属性值或内容相近元数据属性值的文件打包成包装器,以虚拟目录方式挂载在文件系统根目录下;随后,用户可通过访问虚拟目录,快速从海量文件中筛选感兴趣的数据。

    数据写入方法和系统、存储介质、电子设备及计算机程序产品

    公开(公告)号:CN120010792A

    公开(公告)日:2025-05-16

    申请号:CN202510491043.2

    申请日:2025-04-18

    Abstract: 本申请公开了一种数据写入方法和系统、存储介质、电子设备及计算机程序产品,涉及存储系统领域,包括:通过存储客户端中的第一处理单元对第一数据流进行编码计算,并将编码计算后的第一数据流存储至第一处理单元中的缓存单元中;进而根据第一数据流待写入的第一固态硬盘的第一地址和第一数据流所在的缓存单元的第二地址的第一标识符即可使包含第一固态硬盘的第一存储节点将编码计算后的第一数据流写入至第一固态硬盘中。也就是说,本申请实施例通过存储客户端而非CPU进行数据流处理中的编码计算任务,从而解决了相关技术中通过CPU运行软件执行数据流处理中的编码运算任务,CPU在处理编码运算时,还需要处理其他业务,导致的内存资源的抢占问题。

    分布式文件系统命名空间管理方法、装置和设备

    公开(公告)号:CN117806836B

    公开(公告)日:2024-06-07

    申请号:CN202410225048.6

    申请日:2024-02-29

    Inventor: 张立强

    Abstract: 本申请涉及一种分布式文件系统命名空间管理方法、装置和设备。主要技术方案包括:响应于应用程序访问分布式文件系统的命名空间,命名空间访问特征统计模块获取应用程序访问命名空间的特征信息,客户端向目标服务端的命名空间访问特征分析模块发送特征信息,命名空间访问特征分析模块根据特征信息确定应用程序访问的目标目录/文件,命名空间授权管理模块设置应用程序对目标目录/文件的访问权限,并创建应用程序的虚拟视图,元数据服务模块获取虚拟视图的元数据,并向客户端发送虚拟视图的元数据,以使用户端根据虚拟视图的元数据管理应用程序对分布式文件系统的访问请求,能够高效地处理访问请求,减少文件系统的工作负载,提升文件系统性能。

    分布式文件系统命名空间管理方法、装置和设备

    公开(公告)号:CN117806836A

    公开(公告)日:2024-04-02

    申请号:CN202410225048.6

    申请日:2024-02-29

    Inventor: 张立强

    Abstract: 本申请涉及一种分布式文件系统命名空间管理方法、装置和设备。主要技术方案包括:响应于应用程序访问分布式文件系统的命名空间,命名空间访问特征统计模块获取应用程序访问命名空间的特征信息,客户端向目标服务端的命名空间访问特征分析模块发送特征信息,命名空间访问特征分析模块根据特征信息确定应用程序访问的目标目录/文件,命名空间授权管理模块设置应用程序对目标目录/文件的访问权限,并创建应用程序的虚拟视图,元数据服务模块获取虚拟视图的元数据,并向客户端发送虚拟视图的元数据,以使用户端根据虚拟视图的元数据管理应用程序对分布式文件系统的访问请求,能够高效地处理访问请求,减少文件系统的工作负载,提升文件系统性能。

    一种多协议数据共享架构

    公开(公告)号:CN110781152A

    公开(公告)日:2020-02-11

    申请号:CN201910954198.X

    申请日:2019-10-09

    Abstract: 本申请公开了一种多协议数据共享架构,包括文件存储应用、对象存储应用、文件存储元数据池、对象存储元数据池及文件存储数据池;其中:文件存储数据池用于以文件协议的方式存储共享数据;文件存储元数据池用于以文件协议的方式存储共享数据对应的元数据;对象存储元数据池用于以对象协议的方式存储共享数据对应的元数据;文件存储应用用于采用文件协议访问文件存储元数据池及文件存储数据池;对象存储应用用于采用对象协议访问对象存储元数据池,以及用于利用自身接口转换得到的文件协议访问接口访问文件存储数据池。本申请仅需进行接口转换即可实现对象协议及文件协议的数据共享,有效避免了因数据格式转换存在的效率问题及存储空间占用问题。

    一种多协议数据共享架构

    公开(公告)号:CN110781152B

    公开(公告)日:2022-04-22

    申请号:CN201910954198.X

    申请日:2019-10-09

    Abstract: 本申请公开了一种多协议数据共享架构,包括文件存储应用、对象存储应用、文件存储元数据池、对象存储元数据池及文件存储数据池;其中:文件存储数据池用于以文件协议的方式存储共享数据;文件存储元数据池用于以文件协议的方式存储共享数据对应的元数据;对象存储元数据池用于以对象协议的方式存储共享数据对应的元数据;文件存储应用用于采用文件协议访问文件存储元数据池及文件存储数据池;对象存储应用用于采用对象协议访问对象存储元数据池,以及用于利用自身接口转换得到的文件协议访问接口访问文件存储数据池。本申请仅需进行接口转换即可实现对象协议及文件协议的数据共享,有效避免了因数据格式转换存在的效率问题及存储空间占用问题。

    基于跨域冗余中纠删码计算的加解密方法、装置及系统

    公开(公告)号:CN117313120A

    公开(公告)日:2023-12-29

    申请号:CN202311204018.9

    申请日:2023-09-15

    Abstract: 本发明公开了一种基于跨域冗余中纠删码计算的加解密方法、装置及系统,属于计算机存储领域,方法包括:掩码生成机构i利用含有其秘密信息的随机数作为纠删码输入,生成n个预掩码,保留第i个预掩码,将第j个预掩码对应发送至掩码生成机构j,n为掩码生成机构的数量,i,j∈{1,2,…,n}且i≠j;掩码生成机构i将其生成并保留的预掩码与其接收到的来自其它掩码生成机构的预掩码相加,得到其加密掩码,所有掩码生成机构的加密掩码形成一组加密掩码组;同理生成多组加密掩码组,随机选择一组加密掩码组,数据机构和存储机构利用各自保留的且与选择的加密掩码组对应的加密掩码,协同完成数据加解密和存储。降低了跨域纠删码的计算开销。

    一种联盟链中的CPU-GPU混合验证方法、装置及系统

    公开(公告)号:CN117171807A

    公开(公告)日:2023-12-05

    申请号:CN202311122371.2

    申请日:2023-08-31

    Abstract: 本发明公开了一种联盟链中的CPU‑GPU混合验证方法、装置及系统。验证方法包括:验证节点将完整性验证通过的待验证的区块中需要进行VSCC验证的数字签名信息从CPU中拷贝到GPU中;从GPU全局内存中指定的位置获取所需要的数据,进行数字签名验证,得到VSCC验证结果;在GPU验证的同时,在CPU中依次验证所有交易的读写集的版本号是否合法,对验证不通过的进行记录,得到MVCC验证结果;综合VSCC验证结果和MVCC验证结果得到最终验证结果。解决了验证所耗时间较长,联盟链的交易处理能力不足,从而缓解联盟链的可扩展性的技术问题,实现了加快了区块的验证速度,提高了联盟链系统的吞吐率,提高交易处理能力,提高了联盟链系统的可扩展性的有益效果。

Patent Agency Ranking