-
公开(公告)号:CN111611274B
公开(公告)日:2024-07-16
申请号:CN202010469533.X
申请日:2020-05-28
Applicant: 华中科技大学 , 航天科工网络信息发展有限公司
IPC: G06F16/2453 , G06N3/084
Abstract: 本发明公开了一种数据库查询优化方法,包括:连接顺序选择器和自适应决策网络。其中连接顺序选择器用于选择查询计划中最优的连接顺序,其中包括一种新的数据库查询计划编码方案,将编码与连接顺序一一对应;一个预测查询计划执行时间的价值网络,由查询计划及其对应真实执行时间进行训练,用于蒙特卡洛树搜索中的奖励反馈;蒙特卡洛树搜索方法,用于模拟生成多种不同的连接顺序,由连接顺序价值网络评价该连接顺序的好坏,在达到预设的探索次数后返回一个推荐的连接顺序。自适应决策网络用于区分查询语句是否使用该连接顺序选择器,提升优化系统的整体性能。本发明的方法和系统可以有效避免传统查询优化器的局限性,提高数据库查询效率。
-
公开(公告)号:CN112131140B
公开(公告)日:2023-07-14
申请号:CN202011018307.6
申请日:2020-09-24
Applicant: 北京计算机技术及应用研究所 , 航天科工网络信息发展有限公司 , 华中科技大学
IPC: G06F12/02
Abstract: 本发明涉及一种基于SSD的支持高效存储空间管理的键值分离存储方法,包括:将值存储空间划分为等长的段,构建段管理器以管理所有数据段的失效和有效状态,为每个段建立值存储失效偏移集和键存储失效偏移集,进行可用段缓存和半失效段缓存,所述值存储失效偏移集用于记录键存储的压缩操作中丢弃的失效值元数据,以辅助值存储的空间回收;键存储失效偏移集用于记录被动垃圾回收后,被回收的数据段中仍存在于键存储中的偏移,这些位置不用再回收,因此如果在键存储中采集到这些偏移,直接丢弃。本发明通过在键存储部分采集向下压缩操作中丢弃的失效键值对,构建一个高效的值存储空间管理器,实现轻量地垃圾回收操作,进一步减轻值存储中GC操作对系统前台写操作的影响。
-
公开(公告)号:CN112000851B
公开(公告)日:2023-03-28
申请号:CN202010883469.X
申请日:2020-08-28
Applicant: 北京计算机技术及应用研究所 , 航天科工网络信息发展有限公司 , 华中科技大学
IPC: G06F16/901
Abstract: 本发明涉及一种键值模型、文档模型和图模型数据的统一存储方法,包括:利用文档模型对数据的描述能力,建立键值模型到文档模型的映射以及图模型到文档模型的映射;键值模型和文档模型的统一存储包括:设计Class类,Class类实例化后的普通表存放文档模型的记录;图模型和文档模型的统一存储方法包括:设计Vector类和Edge类,Vector类实例化后的顶点表存放文档模型的记录,Edge类实例化后的边表存放文档模型的记录;键值模型、图模型和文档模型的统一存储包括:Vector子类和Edge子类与父类Class类是继承关系,Class类支持键值模型和文档模型,Vector类和Edge类支持顶点和边,使用Vector类和Edge类实例化的顶点和边可以同时存储键值模型、文档模型和图模型的数据。
-
公开(公告)号:CN112131206A
公开(公告)日:2020-12-25
申请号:CN202011029986.7
申请日:2020-09-24
Applicant: 北京计算机技术及应用研究所 , 航天科工网络信息发展有限公司 , 华中科技大学
Abstract: 本发明涉及一种多模型数据库OrientDB参数配置自动调优方法,包括:在默认参数配置下使用MMBench对OrientDB进行基准测试,使用OSMonitor得到OrientDB的初始运行状态s,使用OPIndicator得到OrientDB的性能p;在状态s,调优模型输出参数配置a;将OrientDB参数配置调整为a后,使用MMBench对OrientDB进行基准测试,OSMonitor对OrientDB的运行状态进行实时监控和处理得到状态指标s′,OPIndicator统计OrientDB的性能变化,根据奖励函数计算得到奖励r;将训练数据四元组(s,a,r,s′)存入调优经验池;从调优经验池中随机采样数量为m的小批量样本用以训练调优模型;如果调优模型收敛或达到人为设置的终止条件则结束训练得到预训练调优模型;在实际工作负载下使用预训练调优模型输出推荐的参数配置。
-
公开(公告)号:CN112131140A
公开(公告)日:2020-12-25
申请号:CN202011018307.6
申请日:2020-09-24
Applicant: 北京计算机技术及应用研究所 , 航天科工网络信息发展有限公司 , 华中科技大学
IPC: G06F12/02
Abstract: 本发明涉及一种基于SSD的支持高效存储空间管理的键值分离存储方法,包括:将值存储空间划分为等长的段,构建段管理器以管理所有数据段的失效和有效状态,为每个段建立值存储失效偏移集和键存储失效偏移集,进行可用段缓存和半失效段缓存,所述值存储失效偏移集用于记录键存储的压缩操作中丢弃的失效值元数据,以辅助值存储的空间回收;键存储失效偏移集用于记录被动垃圾回收后,被回收的数据段中仍存在于键存储中的偏移,这些位置不用再回收,因此如果在键存储中采集到这些偏移,直接丢弃。本发明通过在键存储部分采集向下压缩操作中丢弃的失效键值对,构建一个高效的值存储空间管理器,实现轻量地垃圾回收操作,进一步减轻值存储中GC操作对系统前台写操作的影响。
-
公开(公告)号:CN112000851A
公开(公告)日:2020-11-27
申请号:CN202010883469.X
申请日:2020-08-28
Applicant: 北京计算机技术及应用研究所 , 航天科工网络信息发展有限公司 , 华中科技大学
IPC: G06F16/901
Abstract: 本发明涉及一种键值模型、文档模型和图模型数据的统一存储方法,包括:利用文档模型对数据的描述能力,建立键值模型到文档模型的映射以及图模型到文档模型的映射;键值模型和文档模型的统一存储包括:设计Class类,Class类实例化后的普通表存放文档模型的记录;图模型和文档模型的统一存储方法包括:设计Vector类和Edge类,Vector类实例化后的顶点表存放文档模型的记录,Edge类实例化后的边表存放文档模型的记录;键值模型、图模型和文档模型的统一存储包括:Vector子类和Edge子类与父类Class类是继承关系,Class类支持键值模型和文档模型,Vector类和Edge类支持顶点和边,使用Vector类和Edge类实例化的顶点和边可以同时存储键值模型、文档模型和图模型的数据。
-
公开(公告)号:CN101796514B
公开(公告)日:2012-04-18
申请号:CN200880014000.X
申请日:2008-10-07
Applicant: 华中科技大学
CPC classification number: G06F3/061 , G06F3/062 , G06F3/0643 , G06F3/067 , G06F2213/0038
Abstract: 本发明涉及基于对象存储设备的访问和管理技术领域,它提供一种对象存储系统的管理方法,所述对象存储系统包括根对象、分区对象、集合对象、用户对象和功能对象,功能对象包括用户功能对象和系统功能对象。用户功能对象响应客户端请求,执行客户端请求的操作,使现有客户端承担的数据处理任务移至对象存储设备完成,以达到节约网络存储带宽、提高存储数据的安全性等目的。系统功能对象执行系统管理功能,使文件系统和数据库系统等的底层磁盘管理由对象存储设备完成,可容易地在存储系统内实现自动的数据备份、负载均衡等功能。用户功能对象和系统功能对象均可由用户定制。本发明改变传统存储系统的数据管理和处理方式,提高了存储系统性能。
-
公开(公告)号:CN101674334A
公开(公告)日:2010-03-17
申请号:CN200910272358.9
申请日:2009-09-30
Applicant: 华中科技大学
Abstract: 一种网络存储设备的访问控制方法,属于计算机网络存储系统,解决现有访问控制方法维护和管理一个集中的访问控制列表,形成性能瓶颈,影响存储系统性能和可扩展性的问题。本发明包括创建对象步骤和对象操作步骤,网络存储设备存储用户所需的数据对象和目录对象,它们均由属性部分和数据部分组成,属性部分包括访问控制列表。本发明将访问控制列表作为数据对象的安全属性和数据一起存储,定义了访问控制列表的继承规则和访问控制项的优先级,提高了数据访问控制的灵活性,在读取用户所要操作的数据的同时,定位了相应的访问控制列表,实现分布式访问控制,极大程度地减少了分布式存储系统的访问控制开销,提高了系统的可扩展性。
-
公开(公告)号:CN112199536A
公开(公告)日:2021-01-08
申请号:CN202011100158.8
申请日:2020-10-15
Applicant: 华中科技大学
Abstract: 本发明公开了一种基于跨模态的快速多标签图像分类方法,该方法可以挖掘图像中不同对象之间的共现关系,进而高效地融合图像特征与标签共现关系来生成一个端到端的多标签图像分类模型。该方法通过统计标签之间的共现概率来模型对象之间的依赖关系,并采用双线性多模态因子池化组件来融合图像特征与标签共现关系,不仅加速了模型的收敛速度而且提升了图像分类性能。本发明提出的方法首先结合卷积神经网络和图卷积网络分别生成图像的特征和标签的共现关系词向量,然后采用MFB融合这两种模态的向量,最后通过多标签分类函数生成端到端的分类模型。本发明高效地融合了图像的特征和标签的共现关系词向量,大大加速了模型的收敛速度。
-
公开(公告)号:CN111611274A
公开(公告)日:2020-09-01
申请号:CN202010469533.X
申请日:2020-05-28
Applicant: 华中科技大学 , 航天科工网络信息发展有限公司
IPC: G06F16/2453 , G06N3/04
Abstract: 本发明公开了一种数据库查询优化方法,包括:连接顺序选择器和自适应决策网络。其中连接顺序选择器用于选择查询计划中最优的连接顺序,其中包括一种新的数据库查询计划编码方案,将编码与连接顺序一一对应;一个预测查询计划执行时间的价值网络,由查询计划及其对应真实执行时间进行训练,用于蒙特卡洛树搜索中的奖励反馈;蒙特卡洛树搜索方法,用于模拟生成多种不同的连接顺序,由连接顺序价值网络评价该连接顺序的好坏,在达到预设的探索次数后返回一个推荐的连接顺序。自适应决策网络用于区分查询语句是否使用该连接顺序选择器,提升优化系统的整体性能。本发明的方法和系统可以有效避免传统查询优化器的局限性,提高数据库查询效率。
-
-
-
-
-
-
-
-
-