一种基于多大语言模型专家引导的数据库参数调优方法

    公开(公告)号:CN120045635A

    公开(公告)日:2025-05-27

    申请号:CN202510110055.6

    申请日:2025-01-23

    Abstract: 本发明公开了一种基于多大语言模型专家引导的数据库参数调优方法,构建专家系统,使用RRAG算法处理文档构建分层索引保存摘要;基于遗传算法GA,依据自适应生存原则选个体后杂交并按概率改变元素生成高质量样本;存储遗传算法GA生成的样本,搜索空间优化器对内存池指标分类、压缩降维,获取遗传算法样本变化指标并结合专家知识形成完整旋钮列表;采用优化的DDPG算法λ‑DDPG,考虑多个因素,通过延迟更新和软更新策略提高强化学习稳定性推荐最佳配置。本方法在不显著改变现有数据库架构和基础模型的情况下,直接应用于数据库旋钮调优任务,显著提升数据库性能,尤其在应对复杂数据库环境和动态变化的工作负载时展现出良好效果。

    一种面向冷热数据的分级存储系统及方法

    公开(公告)号:CN112948398B

    公开(公告)日:2023-02-24

    申请号:CN202110476035.2

    申请日:2021-04-29

    Abstract: 本发明公开了一种面向冷热数据的分级存储系统及方法,系统包括数据采集模块、冷热数据判定模块和冷热数据迁移模块;其中,数据采集模块用于采集用户数据访问请求;冷热数据判定模块用于分析数据访问请求同时根据分析出的温度计算相关信息计算数据温度,并将温度计算相关信息和数据温度更新并重新封装至原始数据;冷热数据迁移模块用于对热库中的数据进行监控,将不符合热库中两个设定阈值的热数据迁移到冷库中,并根据数据访问特征动态调整设定阈值。本发明基于数据的访问时间、访问频率和数据关联性三个方面的特征,对数据的温度进行量化,实现对冷热数据的判定和冷热数据的分离存储。

    一种基于强化学习的关系型数据库查询优化方法及系统

    公开(公告)号:CN112988802B

    公开(公告)日:2022-07-15

    申请号:CN202110475590.3

    申请日:2021-04-29

    Abstract: 本发明公开了一种基于强化学习的关系型数据库查询优化方法及系统,方法包括以下步骤:步骤1:通过树卷积神经网络提取逻辑计划树及优化器状态信息特征;步骤2:利用强化学习模型获得匹配的优化规则应用顺序;步骤3:优化器选择适合当前查询的优化规则;系统包括规则应用与信息采集模块、机器学习模块和数据交换模块;所述规则应用与信息采集模块和机器学习模块通过数据交换模块连接,通过本地RPC请求实现数据库与规则应用与信息采集模块和机器学习模块的数据交互。本发明使用强化学习让数据库能够根据当前处理的SQL查询语句自动选择每一步的逻辑优化规则,增加了逻辑优化的可扩展性,提高了逻辑优化阶段的灵活性,进而提高数据查新效率。

    基于图注意力网络的查询优化领域代价估计方法

    公开(公告)号:CN117113075A

    公开(公告)日:2023-11-24

    申请号:CN202310810875.7

    申请日:2023-07-04

    Abstract: 本发明公开了基于图注意力网络的查询优化领域代价估计方法,包括以下步骤:获取数据并构建针对PostgreSQL数据库的训练集;构建代价估计模型的深度学习网络;将训练集传入代价估计模型对深度学习网络进行训练;基于需要预测的查询语句的数据,得到预测的代价;将代价估计模型外挂于PostgreSQL数据库中,实现在该数据库上的代价估计任务。本发明对传统的基数估计和代价估计方法的发展进行了调研,深入研究和分析了现有的学习型代价估计模型存在的问题,并提出了基于图注意力网络的代价估计模型。在特征编码中引入表格基数、基表选择率和连接选择率等有效的特征数据,从而提高了代价估计的准确性。

    一种基于图神经网络的数据库查询优化方法及系统

    公开(公告)号:CN113010547A

    公开(公告)日:2021-06-22

    申请号:CN202110491751.8

    申请日:2021-05-06

    Abstract: 本发明公开了一种基于图神经网络的数据库查询优化方法及系统,方法包括:数据采集:根据数据的使用规律来合理的调节采样行为;基数及代价估计:利用树型图神经网络提取查询计划树的结构特征,并使用图卷积网络提取各个数据列的关联关系及连接的拓扑关系,从而建立基数及代价估计网络模型;连接顺序优化:利用图卷积算法提取查询特征和连接顺序特征,并利用强化学习算法感知数据库真实环境,从而不断优化模型,从而提升连接顺序决策的效果;通过对数据分布特征、关联关系和数据库环境特点的学习,建立基数估计模型和连接顺序优化模型,并将算法融合到分布式关系型数据库中。本发明提高在逻辑优化和物理优化阶段的算法效率,提升了查询执行速度。

    一种基于强化学习的关系型数据库查询优化方法及系统

    公开(公告)号:CN112988802A

    公开(公告)日:2021-06-18

    申请号:CN202110475590.3

    申请日:2021-04-29

    Abstract: 本发明公开了一种基于强化学习的关系型数据库查询优化方法及系统,方法包括以下步骤:步骤1:通过树卷积神经网络提取逻辑计划树及优化器状态信息特征;步骤2:利用强化学习模型获得匹配的优化规则应用顺序;步骤3:优化器选择适合当前查询的优化规则;系统包括规则应用与信息采集模块、机器学习模块和数据交换模块;所述规则应用与信息采集模块和机器学习模块通过数据交换模块连接,通过本地RPC请求实现数据库与规则应用与信息采集模块和机器学习模块的数据交互。本发明使用强化学习让数据库能够根据当前处理的SQL查询语句自动选择每一步的逻辑优化规则,增加了逻辑优化的可扩展性,提高了逻辑优化阶段的灵活性,进而提高数据查新效率。

    一种基于注意力机制和数据感知的基数估计优化方法

    公开(公告)号:CN118964403A

    公开(公告)日:2024-11-15

    申请号:CN202410991235.5

    申请日:2024-07-23

    Abstract: 本发明属于数据库管理系统查询优化技术领域,具体涉及一种基于注意力机制和数据感知的基数估计优化方法。本发明提出了一种数据感知的双注意力模型,集成了位置注意力模块和交叉注意力模块,然后采用了基于贝叶斯神经网络的学习能力策略,通过蒙特卡洛dropout方法对模型不确定性进行量化,有效提升了模型对多样化数据分布的适应性和泛化能力,最后设计了主动学习数据采样策略,能够智能筛选出对模型训练最为关键的数据样本,优化学习过程,提高预测的准确性,通过集成学习策略,融合了通过不同数据采样策略获得的多个模型,构建了一个强大的集成模型,进一步提升了模型在多种查询工作负载下的泛化能力和稳定性。

Patent Agency Ranking