一种异步网络环境下的多用户ORAM访问系统及方法

    公开(公告)号:CN110830561A

    公开(公告)日:2020-02-21

    申请号:CN201911029233.3

    申请日:2019-10-25

    Abstract: 本发明公开了一种异步网络环境下的多用户ORAM访问系统及方法,属于信息安全技术领域。本发明选用“无驱逐”数据写回,将桶数据简单分为“真”数据区和“假”数据区,“客户端”写回时将数据写回目的桶节点的“真”数据区,对于路径上其他桶节点,则在能写入的“真”数据区和“假”数据区随机选择一个位置写入,在客户端直接确定数据写回路径和位置,以略微的“客户端”计算和存储消耗来降低整体的数据访问消耗,达到真正接近0(1)的整体平均带宽放大,同时保障系统的安全性。采用Shamir秘密共享算法构建选择向量来查找数据,每个服务端的中间数据都是经过秘密共享算法计算后的值,相比于之前的类似工作,不需要复杂的同态加密过程,极大提高了ORAM的实用性。

    面向DFS的全局命名空间下的客户端持久缓存方法及系统

    公开(公告)号:CN110750507A

    公开(公告)日:2020-02-04

    申请号:CN201910938134.0

    申请日:2019-09-30

    Abstract: 本发明公开了一种面向DFS的全局命名空间下的持久客户端缓存方法及系统,属于大规模分布式系统领域,包括:由元数据服务器维护全局目录树的视图,所有客户端共享该视图,且所有客户端可通过该视图访问任意文件;客户端根据缓存预取规则识别需要预取的文件,并将该文件从对象存储服务器迁移至本地进行持久化缓存;在客户端本地缓存的数据量超过缓存阈值时,将客户端本地已缓存的数据替换出;客户端进行文件操作时,若待操作的文件已缓存到客户端本地,且客户端有相应的操作权限,则直接访问本地缓存的文件并完成操作;否则,通过网络远程访问对象存储服务器中的文件并完成操作。本发明能够简化分布式文件系统的数据管理,同时减少网络资源开销。

    一种I/O拥塞控制方法及控制系统

    公开(公告)号:CN109471847A

    公开(公告)日:2019-03-15

    申请号:CN201811083583.3

    申请日:2018-09-18

    Abstract: 本发明公开了一种I/O拥塞控制方法及系统,包括:在服务端获得当前观测时间戳下各节点上报的性能指标数据并预处理,作为观测数据;通过聚类分析得到当前负载类别,并由此将观测数据存储到重放数据库中;分别从重放数据库和观测数据中随机提取多条历史性能指标数据,以得到训练数据集;构建基于神经网络的回报奖励值计算模型,并利用训练数据集训练回报奖励值计算模型;选定一个调控动作,并利用回报奖励值计算模型计算相应的回报奖励值;重复此步骤,以获得最大的回报奖励值所对应的目标调控动作;将目标调控动作广播至所有节点,以由此设置各节点的参数。本发明能够在避免集群产生I/O拥塞,同时提高系统I/O吞吐率并降低可控I/O延迟。

    面向DFS的全局命名空间下的持久客户端缓存方法及系统

    公开(公告)号:CN110750507B

    公开(公告)日:2022-09-20

    申请号:CN201910938134.0

    申请日:2019-09-30

    Abstract: 本发明公开了一种面向DFS的全局命名空间下的持久客户端缓存方法及系统,属于大规模分布式系统领域,包括:由元数据服务器维护全局目录树的视图,所有客户端共享该视图,且所有客户端可通过该视图访问任意文件;客户端根据缓存预取规则识别需要预取的文件,并将该文件从对象存储服务器迁移至本地进行持久化缓存;在客户端本地缓存的数据量超过缓存阈值时,将客户端本地已缓存的数据替换出;客户端进行文件操作时,若待操作的文件已缓存到客户端本地,且客户端有相应的操作权限,则直接访问本地缓存的文件并完成操作;否则,通过网络远程访问对象存储服务器中的文件并完成操作。本发明能够简化分布式文件系统的数据管理,同时减少网络资源开销。

    基于字典树的索引结构、数据查询优化方法、主存管理器

    公开(公告)号:CN110347685B

    公开(公告)日:2021-08-20

    申请号:CN201910579338.X

    申请日:2019-06-28

    Inventor: 曾令仿 程稳

    Abstract: 本发明公开了基于字典树的索引结构、数据查询优化方法、主存管理器,属于数据存储领域。索引结构由容器组成,容器存储T节点和S节点,完整键被划分为部分键,T节点存储部分键的前m/2位,S节点存储部分键的后m/2位,从字典树的根节点到某一节点路径上经过的部分键连接起来,形成完整键。索引结构更为紧凑,从而提高主存空间利用率。使用跳后继将T节点直接跳转到后续兄弟节点,从而减少比较次数,提升查找性能;使用T节点跳表将T节点跳转到S节点,使用容器跳表将S节点跳转到T节点,直接跳到最近的目标,从而跳过大量不必要的条目,提升的找性能。由主存管理器解析出的包含各个层次结构ID的指针P,将索引结构与主存地址完全解耦。

    基于时间序列预测的海量小文件存储性能优化方法及系统

    公开(公告)号:CN110968272B

    公开(公告)日:2021-01-01

    申请号:CN201911291844.5

    申请日:2019-12-16

    Abstract: 本发明公开了一种基于时间序列预测的海量小文件存储性能优化方法,属于信息存储领域,包括:收集带有时间信息的历史文件访问记录,得到数据集;将数据集预处理为离散的时间序列数据后,使用时间窗口在其上滚动产生训练数据集合,任意t时刻的训练数据以t‑n~t时刻的数据为输入数据,并以t+1时刻的数据为标签数据;基于循环神经网络建立时间序列预测模型,并利用由训练数据集合划分得到的训练集、验证集和测试集依次进行训练、验证与测试,从而得到目标模型;利用目标模型预测文件大小的变化趋势,以识别出其中的大文件和小文件;将大文件直接存储,将小文件基于时间序列聚合后存储。本发明能够优化海量小文件在分布式存储系统中的存储性能。

    一种I/O拥塞控制方法及控制系统

    公开(公告)号:CN109471847B

    公开(公告)日:2020-06-09

    申请号:CN201811083583.3

    申请日:2018-09-18

    Abstract: 本发明公开了一种I/O拥塞控制方法及系统,包括:在服务端获得当前观测时间戳下各节点上报的性能指标数据并预处理,作为观测数据;通过聚类分析得到当前负载类别,并由此将观测数据存储到重放数据库中;分别从重放数据库和观测数据中随机提取多条历史性能指标数据,以得到训练数据集;构建基于神经网络的回报奖励值计算模型,并利用训练数据集训练回报奖励值计算模型;选定一个调控动作,并利用回报奖励值计算模型计算相应的回报奖励值;重复此步骤,以获得最大的回报奖励值所对应的目标调控动作;将目标调控动作广播至所有节点,以由此设置各节点的参数。本发明能够在避免集群产生I/O拥塞,同时提高系统I/O吞吐率并降低可控I/O延迟。

    一种基于3D堆叠内存的快速重复数据块识别方法

    公开(公告)号:CN109240605B

    公开(公告)日:2020-05-19

    申请号:CN201810937496.3

    申请日:2018-08-17

    Abstract: 本发明公开了一种基于3D堆叠内存的快速重复数据块识别方法,该方法包括以下步骤:将数据块指纹发送至3D堆叠内存;在3D堆叠内存中完成数据块指纹的检索和存储;3D堆叠内存将指纹检索结果返回至CPU。本发明通过使用3D堆叠内存来存储数据块指纹,3D堆叠内存由多个DRAM芯片和一个逻辑层芯片堆叠而成,并通过TSV技术连接,逻辑层通过TSV访问存储层而不需要通过数据总线,速度较快,避免了总线上不必要的数据移动,减少了访问内存的时间;本发明通过将数据指纹分类,将存储芯片分区,每类指纹存储在一个分区中,并在逻辑层嵌入多个计算单元和一个路由,路由将数据指纹转发到各计算单元,避免了计算单元之间的通信开销,降低了指纹查找过程中的能耗。

Patent Agency Ranking