-
公开(公告)号:CN112286954B
公开(公告)日:2022-08-16
申请号:CN202011024736.4
申请日:2020-09-25
Applicant: 北京邮电大学
IPC: G06F16/242 , G06F16/2458
Abstract: 本申请提出一种基于混合引擎的多维数据分析方法和系统,涉及数据处理技术领域,其中,方法包括:可视化模块获取查询请求,并将查询请求发送至查询路由模块,查询路由模块的查询任务解析单元根据查询请求,生成结构化查询语句,查询路由模块的元数据分析单元,获取结构化查询语句,根据结构化查询语句,确定结构化查询语句的查询引擎,以使得对应的查询引擎对查询请求进行分析,通过路由至不同的查询引擎,对相应的结构化查询SQL语句进行分析,使得在数据规模急剧增长的情况下,提高了查询的效率,满足用户各种业务场景的数据分析需求。
-
公开(公告)号:CN112286954A
公开(公告)日:2021-01-29
申请号:CN202011024736.4
申请日:2020-09-25
Applicant: 北京邮电大学
IPC: G06F16/242 , G06F16/2458
Abstract: 本申请提出一种基于混合引擎的多维数据分析方法和系统,涉及数据处理技术领域,其中,方法包括:可视化模块获取查询请求,并将查询请求发送至查询路由模块,查询路由模块的查询任务解析单元根据查询请求,生成结构化查询语句,查询路由模块的元数据分析单元,获取结构化查询语句,根据结构化查询语句,确定结构化查询语句的查询引擎,以使得对应的查询引擎对查询请求进行分析,通过路由至不同的查询引擎,对相应的结构化查询SQL语句进行分析,使得在数据规模急剧增长的情况下,提高了查询的效率,满足用户各种业务场景的数据分析需求。
-
公开(公告)号:CN112286953A
公开(公告)日:2021-01-29
申请号:CN202011022583.X
申请日:2020-09-25
Applicant: 北京邮电大学
IPC: G06F16/242
Abstract: 本申请提出一种多维数据查询方法、装置和电子设备,涉及数据业务技术领域,其中,方法包括:获取多个源数据表和第一历史查询语句,根据多个源数据表中的元数据,生成数据表关联模型,根据第一历史查询语句,从数据表关联模型中确定目标维度和目标度量,根据目标维度,确定至少一个第一聚合组,根据至少一个第一聚合组和目标度量,确定物化视图集,并将物化视图集存储至数据库中,根据物化视图集,响应用户的多维数据查询请求,实现了基于元数据和历史查询语句,自动构建物化视图集,并在构建的过程中对物化视图集进行优化,提高了构建的效率,解决现有技术中需要人工构建和物化视图集,导致效率低下的技术问题。
-
公开(公告)号:CN113641669B
公开(公告)日:2023-08-01
申请号:CN202110733535.X
申请日:2021-06-30
Applicant: 北京邮电大学
IPC: G06F16/22 , G06F16/242
Abstract: 本发明提出一种基于混合引擎的多维数据查询方法及装置,其中,方法包括:构建数据立方体生成树,数据立方体生成树包括多个子数据立方体,每个子数据立方体对应一种维度组合的预聚合结果;建立维度字典,维度字典用于表征维度与比特位的映射关系;根据维度字典构建位图索引,并将位图索引套入立方体生成树中,得到基于位图索引的位图树,其中,位图索引由比特数组组成,比特数组中的比特值表征比特位对应的维度是否被预计算;获取查询需求,根据查询需求生成结构化查询语言,并根据结构化查询语言和位图树获取查询结果。本申请提出的方法可以在后台建立Cube的位图Bitmap索引,智能地选择合适的查询引擎执行查询任务,提升系统整体性能。
-
公开(公告)号:CN113641669A
公开(公告)日:2021-11-12
申请号:CN202110733535.X
申请日:2021-06-30
Applicant: 北京邮电大学
IPC: G06F16/22 , G06F16/242
Abstract: 本发明提出一种基于混合引擎的多维数据查询方法及装置,其中,方法包括:构建数据立方体生成树,数据立方体生成树包括多个子数据立方体,每个子数据立方体对应一种维度组合的预聚合结果;建立维度字典,维度字典用于表征维度与比特位的映射关系;根据维度字典构建位图索引,并将位图索引套入立方体生成树中,得到基于位图索引的位图树,其中,位图索引由比特数组组成,比特数组中的比特值表征比特位对应的维度是否被预计算;获取查询需求,根据查询需求生成结构化查询语言,并根据结构化查询语言和位图树获取查询结果。本申请提出的方法可以在后台建立Cube的位图Bitmap索引,智能地选择合适的查询引擎执行查询任务,提升系统整体性能。
-
公开(公告)号:CN112286953B
公开(公告)日:2023-02-24
申请号:CN202011022583.X
申请日:2020-09-25
Applicant: 北京邮电大学
IPC: G06F16/242
Abstract: 本申请提出一种多维数据查询方法、装置和电子设备,涉及数据业务技术领域,其中,方法包括:获取多个源数据表和第一历史查询语句,根据多个源数据表中的元数据,生成数据表关联模型,根据第一历史查询语句,从数据表关联模型中确定目标维度和目标度量,根据目标维度,确定至少一个第一聚合组,根据至少一个第一聚合组和目标度量,确定物化视图集,并将物化视图集存储至数据库中,根据物化视图集,响应用户的多维数据查询请求,实现了基于元数据和历史查询语句,自动构建物化视图集,并在构建的过程中对物化视图集进行优化,提高了构建的效率,解决现有技术中需要人工构建和物化视图集,导致效率低下的技术问题。
-
-
-
-
-