-
公开(公告)号:CN109471847A
公开(公告)日:2019-03-15
申请号:CN201811083583.3
申请日:2018-09-18
Applicant: 华中科技大学
IPC: G06F16/182 , G06F16/11
Abstract: 本发明公开了一种I/O拥塞控制方法及系统,包括:在服务端获得当前观测时间戳下各节点上报的性能指标数据并预处理,作为观测数据;通过聚类分析得到当前负载类别,并由此将观测数据存储到重放数据库中;分别从重放数据库和观测数据中随机提取多条历史性能指标数据,以得到训练数据集;构建基于神经网络的回报奖励值计算模型,并利用训练数据集训练回报奖励值计算模型;选定一个调控动作,并利用回报奖励值计算模型计算相应的回报奖励值;重复此步骤,以获得最大的回报奖励值所对应的目标调控动作;将目标调控动作广播至所有节点,以由此设置各节点的参数。本发明能够在避免集群产生I/O拥塞,同时提高系统I/O吞吐率并降低可控I/O延迟。
-
公开(公告)号:CN109587217A
公开(公告)日:2019-04-05
申请号:CN201811314109.7
申请日:2018-11-06
Applicant: 华中科技大学
IPC: H04L29/08
Abstract: 本发明公开了一种大规模分布式系统的智能监控与管理方法及系统,包括:S1.任务进入分布式系统时,初始化任务的QoS调控参数;S2.根据QoS调控参数进行任务调度;S3.判断所有任务是否全部运行完成,若是,结束,否则,进入步骤S4;S4.采集分布式系统信息和任务信息,并将其反馈给QoS调控参数预测模型;S5.判断QoS调控参数预测模型是否训练完成,若是,根据反馈信息,使用训练好的模型预测出新的QoS调控参数;否则,根据反馈信息训练QoS调控参数预测模型的同时,输出临时QoS调控参数;更新任务的QoS调控参数,返回步骤S2。本发明通过智能优选与实时反馈机制相结合,对大规模分布式系统的任务实现了高效实时调度和管理,实现了对任务进行细粒度的资源配置和调度。
-
公开(公告)号:CN109240605A
公开(公告)日:2019-01-18
申请号:CN201810937496.3
申请日:2018-08-17
Applicant: 华中科技大学
IPC: G06F3/06
Abstract: 本发明公开了一种基于3D堆叠内存的快速重复数据块识别方法,该方法包括以下步骤:将数据块指纹发送至3D堆叠内存;在3D堆叠内存中完成数据块指纹的检索和存储;3D堆叠内存将指纹检索结果返回至CPU。本发明通过使用3D堆叠内存来存储数据块指纹,3D堆叠内存由多个DRAM芯片和一个逻辑层芯片堆叠而成,并通过TSV技术连接,逻辑层通过TSV访问存储层而不需要通过数据总线,速度较快,避免了总线上不必要的数据移动,减少了访问内存的时间;本发明通过将数据指纹分类,将存储芯片分区,每类指纹存储在一个分区中,并在逻辑层嵌入多个计算单元和一个路由,路由将数据指纹转发到各计算单元,避免了计算单元之间的通信开销,降低了指纹查找过程中的能耗。
-
公开(公告)号:CN109471847B
公开(公告)日:2020-06-09
申请号:CN201811083583.3
申请日:2018-09-18
Applicant: 华中科技大学
IPC: G06F16/182 , G06F16/11
Abstract: 本发明公开了一种I/O拥塞控制方法及系统,包括:在服务端获得当前观测时间戳下各节点上报的性能指标数据并预处理,作为观测数据;通过聚类分析得到当前负载类别,并由此将观测数据存储到重放数据库中;分别从重放数据库和观测数据中随机提取多条历史性能指标数据,以得到训练数据集;构建基于神经网络的回报奖励值计算模型,并利用训练数据集训练回报奖励值计算模型;选定一个调控动作,并利用回报奖励值计算模型计算相应的回报奖励值;重复此步骤,以获得最大的回报奖励值所对应的目标调控动作;将目标调控动作广播至所有节点,以由此设置各节点的参数。本发明能够在避免集群产生I/O拥塞,同时提高系统I/O吞吐率并降低可控I/O延迟。
-
公开(公告)号:CN109240605B
公开(公告)日:2020-05-19
申请号:CN201810937496.3
申请日:2018-08-17
Applicant: 华中科技大学
IPC: G06F3/06
Abstract: 本发明公开了一种基于3D堆叠内存的快速重复数据块识别方法,该方法包括以下步骤:将数据块指纹发送至3D堆叠内存;在3D堆叠内存中完成数据块指纹的检索和存储;3D堆叠内存将指纹检索结果返回至CPU。本发明通过使用3D堆叠内存来存储数据块指纹,3D堆叠内存由多个DRAM芯片和一个逻辑层芯片堆叠而成,并通过TSV技术连接,逻辑层通过TSV访问存储层而不需要通过数据总线,速度较快,避免了总线上不必要的数据移动,减少了访问内存的时间;本发明通过将数据指纹分类,将存储芯片分区,每类指纹存储在一个分区中,并在逻辑层嵌入多个计算单元和一个路由,路由将数据指纹转发到各计算单元,避免了计算单元之间的通信开销,降低了指纹查找过程中的能耗。
-
-
-
-