公开(公告)号：CN118796948A

公开(公告)日：2024-10-18

申请号：CN202411275709.2

申请日：2024-09-12

Applicant: 苏州吉呗思数据技术有限公司 ,  天津南大通用数据技术股份有限公司

Inventor： 周春妙 ,  张益 ,  吴明远 ,  赵健

IPC: G06F16/27 ,  G06F16/22 ,  G06F16/21 ,  G06F16/23

Abstract: 本发明提供了一种分布式数据库修改分片规则的方法、装置及电子设备，可以应用于数据库领域。该方法包括：响应于检测到分片规则修改指令，确定与修改分片规则相关的原存储节点和新存储节点、以及原存储节点中待修改的第一数据表；获取分片规则修改参数；在确定分片规则修改参数为存储节点间修改的情况下，在新存储节点创建与第一数据表结构相同的第二数据表；通过插入语句，将第一数据表中的数据插入第二数据表，使得在原存储节点和新存储节点之间实现数据迁移；在系统表中交换第一数据表和第二数据表的存储路径和分片规则，以实现分布式数据库的在线分片规则修改。

公开(公告)号：CN118796564A

公开(公告)日：2024-10-18

申请号：CN202411275868.2

申请日：2024-09-12

Applicant: 苏州吉呗思数据技术有限公司 ,  天津南大通用数据技术股份有限公司

Inventor： 齐文涛

IPC: G06F11/14 ,  G06F16/23 ,  G06F16/27

Abstract: 本发明提供了一种分布式数据库非对等资源备份恢复方法、装置和设备，可以应用于数据库技术领域。该方法包括：响应于检测到备份恢复指令，从恢复配置文件中读取第一参数和第二参数，并生成读取结果，其中，第一参数包括第一存储地址和第一备份地址；第二参数包括表征目标数据库集群的部署参数、表征原数据库集群与目标数据库集群之间资源差异的第一数据分片参数；响应于确定读取结果表征恢复配置文件包括第二参数，从第一存储地址获取备份数据；基于部署参数，将备份数据恢复至第一备份地址；以及基于第一数据分片参数，对备份数据进行重分布操作，得到最终备份数据。

公开(公告)号：CN118796485A

公开(公告)日：2024-10-18

申请号：CN202411289851.2

申请日：2024-09-14

Applicant: 江苏华库数据技术有限公司 ,  天津南大通用数据技术股份有限公司

Inventor： 董益名

IPC: G06F9/50 ,  G06F9/54 ,  G06F9/52 ,  G06F12/084

Abstract: 本发明提供一种基于MESI协议的计算任务并行处理方法，涉及并发控制技术领域，具体包括：基于MESI协议建立多个核心，其中每个核心均包括独立任务队列；由每个核心中建立哈希图结构，获得多个第一优化核心；将待处理任务分解为多个子任务，并将多个子任务分别下发至多个第一优化核心；通过机器学习模型对待处理任务进行预测，根据预测结果为每个所述第一优化核心进行缓存预存，获得多个第二优化核心；通过多个第二优化核心建立的处理器对待处理任务进行处理。本发明降低了因锁竞争导致的性能瓶颈，实现了在多核环境下的计算任务的高效稳定处理。

公开(公告)号：CN118778913A

公开(公告)日：2024-10-15

申请号：CN202411275659.8

申请日：2024-09-12

Applicant: 苏州吉呗思数据技术有限公司 ,  天津南大通用数据技术股份有限公司

Inventor： 韩明帅 ,  王乾宇

IPC: G06F3/06 ,  G06F16/21

Abstract: 本发明提供了一种数据存储方法、装置和设备，可以应用于数据管理领域和数据存储领域。该数据存储方法包括：根据数据库磁盘包括的多个存储空间各自的存储资源量，和多个数据项的数据项大小，确定存储方案的解空间，其中，存储方案表征多个数据项存储在数据库磁盘的存储方式；在解空间内，随机初始化多个存储方案的属性信息，其中，属性信息包括存储位置信息和位置更新速度，存储位置信息表征多个数据项在至少一个存储空间的存储位置；基于目标优化条件对多个存储方案各自的属性信息进行迭代调整，确定目标迭代轮次的存储位置信息；基于目标迭代轮次的存储位置信息，重新确定数据库磁盘包括的多个数据项的存储位置。

公开(公告)号：CN118364033B

公开(公告)日：2024-10-11

申请号：CN202410789311.4

申请日：2024-06-19

Applicant: 天津南大通用数据技术股份有限公司

Inventor： 姜栋 ,  吴学星

IPC: G06F16/27 ,  G06F16/22 ,  G06F16/28 ,  G06F16/242

Abstract: 本申请公开了一种数据库集群间的数据处理方法、装置及相关设备。该方法应用于数据处理技术领域，该方法应用于目标数据库端时包括：向服务网关发送数据拉取请求，并接收服务网关返回的数据源端表结构；根据数据源端表结构，创建本地临时表，并根据数据拉取请求中指示的数据源类型从源数据库端获取对应类型的数据；从所述源数据库端拉取对应数据到本地临时表，以完成数据处理。上述方案，能够实现跨数据库集群进行数据交换和分析。

公开(公告)号：CN118260366B

公开(公告)日：2024-10-08

申请号：CN202410677122.8

申请日：2024-05-29

Applicant: 天津南大通用数据技术股份有限公司

Inventor： 赵庆刚

IPC: G06F16/28 ,  G06F16/22 ,  G06F16/242 ,  G06F16/2455 ,  G06F16/17

Abstract: 本发明涉及数据管理技术领域，公开了基于审计日志的数据生命周期分析方法、装置及产品，该方法包括：获取审计日志汇总表；根据单行最大能拆分出行的数量创建行号维度表；根据起始时间过滤审计日志汇总表，然后将审计日志汇总表中的无用关键字滤除，生成中间结果集表A；将行号维度表和中间结果集表A进行交叉关联，实现自建笛卡尔积，生成中间结果集表B；然后过滤掉系统库的表，生成基础分析数据表；根据基础分析数据表进行冷温热数据分析，获得数据生命周期分析结果。本发明在综合考虑与表的使用情况相关联、规避元数据获取效率低下问题，以及高度集成化三方面的基础上，实现了对数据表的分类功能，大大提高了结果的准确性和工作效率。

公开(公告)号：CN118409830B

公开(公告)日：2024-09-24

申请号：CN202410866031.9

申请日：2024-07-01

Applicant: 天津南大通用数据技术股份有限公司

Inventor： 韩明帅 ,  董益名

IPC: G06F9/46 ,  G06N3/0464 ,  G06N3/09

Abstract: 本发明提供一种数据库事务管理方法、终端及存储介质，涉及数据库领域。该方法包括：获取数据库的新事务数据；基于新事务数据，触发增量学习的调度机制，并基于调度机制，对CNN模型和MBRL模型进行增量学习；CNN模型用于对数据库的新事务数据进行特征提取；MBRL模型用于对数据库的事务管理策略进行优化；基于增量学习后的CNN模型和MBRL模型，进行数据库事务管理。本申请通过增量学习可提高CNN模型的特征提取能力、MBRL模型对事务管理策略的优化能力和模型对新事务数据的适应能力，将增量学习后的CNN模型和MBRL模型，应用于数据库事务管理中，可提升数据库事务管理的性能和适应性，突破性能瓶颈和扩展性问题。

公开(公告)号：CN118245267B

公开(公告)日：2024-09-24

申请号：CN202410641712.5

申请日：2024-05-23

Applicant: 天津南大通用数据技术股份有限公司

Inventor： 廖小平 ,  白兵

IPC: G06F11/07 ,  G06F8/41 ,  G06F16/242

Abstract: 本发明提供了一种主动规避数据库资源异常占用的方法、装置及程序产品，包括获取SQL任务语句并进行语法解析，如果满足第一风险条件，则对SQL任务语句进行规避执行处理，如果没有满足第一风险条件，则执行SQL任务语句，规避执行处理是停止SQL任务语句执行；如果在执行SQL任务语句过程中，满足第二风险条件，则对SQL任务语句进行查杀处理，如果没有满足第二风险条件，则正常执行SQL任务语句，查杀处理是停止SQL任务语句执行。本发明提出一种主动规避数据库资源异常占用的方法、装置及程序产品,可以主动规避存在风险的SQL任务执行，大幅度提升数据库运行的稳定性。

公开(公告)号：CN118312502B

公开(公告)日：2024-09-10

申请号：CN202410741289.6

申请日：2024-06-11

Applicant: 天津南大通用数据技术股份有限公司

Inventor： 商宝琪 ,  靳亚磊

IPC: G06F16/21 ,  G06F16/242 ,  G06F16/22

Abstract: 本发明提供数据库存储过程的迁移方法、装置、设备及存储介质，该方法包括：构建待迁移的存储过程集的抽象语法树集；对所有目标存储过程的抽象语法树进行递归迭代处理，并基于所有目标存储过程的抽象语法树、目标存储过程的名称、该目标存储过程所属数据库的名称，以及递归迭代过程得到的数值，生成中间存储对象；对中间存储对象进行迭代处理，基于预设字典映射生成中间存储过程对应的定义语法，基于预设映射关系调用相应的处理逻辑对中间存储过程对应的定义语法进行语法改造，得到深度处理存储对象；对深度处理存储对象进行拼接改造、行号排序和添加结束标志位处理，得到迁移的存储过程的文件。本发明可以提高存储过程的迁移效率。

公开(公告)号：CN118051563B

公开(公告)日：2024-08-13

申请号：CN202410445706.2

申请日：2024-04-15

Applicant: 天津南大通用数据技术股份有限公司

Inventor： 王聪意 ,  董潇阳 ,  刘诗红 ,  陈昭华

IPC: G06F16/27 ,  G06F16/23 ,  G06F16/2455 ,  G06F16/25

Abstract: 本发明提供了一种基于分布式数据库同构集群的容灾方法，包括：在主备集群的每个节点上安装SCN数据采集组件，执行主备集群的SCN数据并发采集；根据同步的范围执行相应的操作将同步对象存入文本文件中；获取主备集群的节点信息以及节点信息之间的对应关系；根据主备集群的节点信息对各节点下发查询命令，命令采集服务获取SCN数据，并将采集到的SCN数据加载到主备集群层系统表中；查询主备集群中每张表的最大SCN值并对比，根据同步的范围对数据不一致的表执行不同的同步操作；并发地对同步对象执行同步操作。本发明有益效果：提高了应用可用性和用户体验感，满足了同步过程源库不停机的需求，避免了同步时间过长影响用户正常业务。