公开(公告)号：CN119149116A

公开(公告)日：2024-12-17

申请号：CN202411641582.1

申请日：2024-11-18

Applicant: 苏州吉呗思数据技术有限公司 ,  天津南大通用数据技术股份有限公司

Inventor： 邢梦龙

IPC: G06F9/38 ,  G06F15/16

Abstract: 本发明提供了一种数据处理方法、装置、设备和存储介质，可以应用于数据库技术领域。该方法包括：对与业务总表有关的数据去重任务进行识别，得到识别结果；在识别结果包含去重算子的情况下，对数据去重任务进行转换，生成不包含去重算子的数据查询任务；响应于接收到的数据查询任务，确定均衡划分策略；基于均衡划分策略，对业务总表中的数据进行划分，得到多个业务子表，其中，多个业务子表各自的数据量相同，多个业务子表均衡分布在集群服务器中的多个节点上；针对多个业务子表，执行数据查询任务，得到目标查询结果。

公开(公告)号：CN119149116B

公开(公告)日：2025-03-07

申请号：CN202411641582.1

申请日：2024-11-18

Applicant: 苏州吉呗思数据技术有限公司 ,  天津南大通用数据技术股份有限公司

Inventor： 邢梦龙

IPC: G06F9/38 ,  G06F15/16

Abstract: 本发明提供了一种数据处理方法、装置、设备和存储介质，可以应用于数据库技术领域。该方法包括：对与业务总表有关的数据去重任务进行识别，得到识别结果；在识别结果包含去重算子的情况下，对数据去重任务进行转换，生成不包含去重算子的数据查询任务；响应于接收到的数据查询任务，确定均衡划分策略；基于均衡划分策略，对业务总表中的数据进行划分，得到多个业务子表，其中，多个业务子表各自的数据量相同，多个业务子表均衡分布在集群服务器中的多个节点上；针对多个业务子表，执行数据查询任务，得到目标查询结果。