数据库智能统计信息管理方法、系统、设备及介质

    公开(公告)号:CN116610729B

    公开(公告)日:2023-10-13

    申请号:CN202310889673.6

    申请日:2023-07-20

    Abstract: 本发明公开了数据库智能统计信息管理方法、系统、设备及介质,属于数据库技术领域,本发明要解决的技术问题为目前数据库产品过度收集统计信息带来的性能下降以及因无用统计信息更新带来的性能损耗,采用的技术方案为:该方法具体如下:从数据库内核中采集语句级统计信息使用情况;将统计信息使用情况存入自治数据仓库;从自治数据仓库获取统计信息历史使用情况进行分析,当统计信息未使用时间达到阈值后标记为无用统计信息;根据分析情况展示无用统计信息,当统计信息不在白名单中时,给出统计信息删除建议。该系统包括数据采集及存储模块、数据分析模块和统计信息展示模块。

    数据库智能统计信息管理方法、系统、设备及介质

    公开(公告)号:CN116610729A

    公开(公告)日:2023-08-18

    申请号:CN202310889673.6

    申请日:2023-07-20

    Abstract: 本发明公开了数据库智能统计信息管理方法、系统、设备及介质,属于数据库技术领域,本发明要解决的技术问题为目前数据库产品过度收集统计信息带来的性能下降以及因无用统计信息更新带来的性能损耗,采用的技术方案为:该方法具体如下:从数据库内核中采集语句级统计信息使用情况;将统计信息使用情况存入自治数据仓库;从自治数据仓库获取统计信息历史使用情况进行分析,当统计信息未使用时间达到阈值后标记为无用统计信息;根据分析情况展示无用统计信息,当统计信息不在白名单中时,给出统计信息删除建议。该系统包括数据采集及存储模块、数据分析模块和统计信息展示模块。

    一种适用于机器学习的高性能混合分布式架构实现方法

    公开(公告)号:CN117669768A

    公开(公告)日:2024-03-08

    申请号:CN202311558475.8

    申请日:2023-11-21

    Abstract: 本发明公开了一种适用于机器学习的高性能混合分布式架构实现方法,属于机器学习技术领域,该方法的实现包括以下模块:混合分布式训练架构,用于构建数据并行和模型并行混合的机器学习通用分布式训练框架;通用模型分割算法,用于将一个复杂的机器学习模型从特征层面划分为多个相互独立的机器学习子模型;模型剪枝策略,用于将训练过程中性能表现欠佳的子模型剪枝,并将空闲计算资源分配给其他活跃子模型组以进一步提升框架效率和最终模型性能。本发明使得分布式机器学习系统训练效率和模型准确性可以有效提高。

    一种数据库逻辑计划缓存的使用与管理方法及系统

    公开(公告)号:CN117633032A

    公开(公告)日:2024-03-01

    申请号:CN202311528534.7

    申请日:2023-11-16

    Abstract: 本发明公开了一种数据库逻辑计划缓存的使用与管理方法及系统,属于数据库优化技术领域,根据资源占用情况及执行开销,划分TOP‑SQL与非TOP‑SQL,对于非TOP‑SQL,使用既有PlanCache中模板缓存模式的逻辑计划;对于TOP‑SQL,为其建立并维护一个计划管理器,缓存多个逻辑计划,根据实际参数选择最优逻辑缓存计划执行;该方法的实现包含:Top‑SQL判定,逻辑计划捕获,逻辑计划的选择与复用,逻辑计划的演进与管理。本发明实现了数据库逻辑计划的缓存,而且对不同权重的SQL语句实施不同的缓存逻辑计划复用和管理策略,优化了缓存逻辑计划的复用机制,减少了系统资源损耗。

    一种高性能HTAP混合事务分析引擎的实现方法及系统

    公开(公告)号:CN118093602A

    公开(公告)日:2024-05-28

    申请号:CN202311559392.0

    申请日:2023-11-21

    Abstract: 本发明公开了一种高性能HTAP混合事务分析引擎的实现方法及系统,属于数据库技术领域,该方法的具体实现包括:HTAP行列混合存储引擎,用于构建适用于OLTP行存引擎和OLAP列存引擎,实现行列混合存储引擎中数据的实时同步更新以及列存引擎历史老旧数据的淘汰策略;HTAP混合事务分析引擎优化器,用于扩展HTAP数据库优化器开销模型,对到来的SQL语句基于行列存储引擎统计信息和元数据智能选择最优执行计划。本发明通过行列混合存储引擎的构建和基于行列混合存储引擎的HTAP智能优化器等设计,用户可以在同一套系统方便地同时满足不同特型的业务需求,并使得不同引擎的性能优势在全业务场景下得到最大程度的发挥释放。

    一种基于规则的数据库预计算自治系统及方法

    公开(公告)号:CN117009385B

    公开(公告)日:2024-01-19

    申请号:CN202311264818.X

    申请日:2023-09-28

    Abstract: 本发明涉及数据库领域,具体提供了一种基于规则的数据库预计算自治系统及方法,包括数据采集模块、负载分析模块、预计算推荐模块和用户交互模块;数据采集模块收集历史负载信息和已有预计算使用、匹配情况,用作预计算自治算法的输入;负载分析模块通过对历史负载和预计算使用情况的数据进行解析和分析,推荐算法进行预计算自治推荐;预计算推荐模块根据负载分析结果,输出新建预计算、修改或删除已有预计算的建议;用户交互模块发起预计算自治请求、自治建议查看和应用操作。与现有技术相比,本发明通过推荐的预计算和数据库中已有的预计算进行对比,找出数据库中冗余或创建错误的预计算,为用户推荐预计算删除和更改建议。

    一种分布式数据库自适应副本选择方法及装置

    公开(公告)号:CN116610756A

    公开(公告)日:2023-08-18

    申请号:CN202310868595.1

    申请日:2023-07-17

    Abstract: 本发明公开了一种分布式数据库自适应副本选择方法及装置,属于分布式数据库领域,本发明要解决的技术问题为如何快速选取副本用来提高效率,技术方案为:S101、网关节点解析SQL语句,获取该语句中要读取的数据范围;S102、从副本缓存信息中过滤掉旧版本的副本,并获取拥有最新版本的Range大小;S103、将步骤S102中得到的副本信息参数传递到遗传进化算法中,随即生成关于可选择的副本分布信息的种群开始迭代;S104、设置截断机制;S105、由网关节点发送到对应的节点进行读取;S106、将各个节点的结果汇集到网关节点并返回给客户端。与现有技术相比,本发明遗传进化在很短的时间内可以得到良好的优化结果。

    一种基于规则的数据库预计算自治系统及方法

    公开(公告)号:CN117009385A

    公开(公告)日:2023-11-07

    申请号:CN202311264818.X

    申请日:2023-09-28

    Abstract: 本发明涉及数据库领域,具体提供了一种基于规则的数据库预计算自治系统及方法,包括数据采集模块、负载分析模块、预计算推荐模块和用户交互模块;数据采集模块收集历史负载信息和已有预计算使用、匹配情况,用作预计算自治算法的输入;负载分析模块通过对历史负载和预计算使用情况的数据进行解析和分析,推荐算法进行预计算自治推荐;预计算推荐模块根据负载分析结果,输出新建预计算、修改或删除已有预计算的建议;用户交互模块发起预计算自治请求、自治建议查看和应用操作。与现有技术相比,本发明通过推荐的预计算和数据库中已有的预计算进行对比,找出数据库中冗余或创建错误的预计算,为用户推荐预计算删除和更改建议。

Patent Agency Ranking