-
公开(公告)号:CN116483903A
公开(公告)日:2023-07-25
申请号:CN202310457815.1
申请日:2023-04-26
Applicant: 江苏苏宁银行股份有限公司
IPC: G06F16/25 , G06F16/2455 , G06F16/23 , G06F8/30 , G06F9/448
Abstract: 本发明公开了一种面向多源异构数据源的全链路数据血缘关系识别方法。该方法包括各个任务部门在大数据平台配置各自批量执行任务流,对任务流的元数据信息进行动态采集,并对采集到的元数据根据任务流类型进行数据的处理加工,对处理加工好的数据进行数据结构调整,并统一发送至血缘规则解析引擎中,依次进行元数据类型判断、关键信息抽取及处理、构建单数据源表的血缘链路关系;根据构建出的单数据源表的血缘链路关系,并通过对接元数据管理平台的全量元数据信息,分析出输入的数据表和字段信息的血缘上下游关系,返回全量构建全链路血缘关系图谱。本发明能够对历史孤岛数据进行血缘链路追溯,完备的数据血缘有效提高的数据的可信度和完整性。
-
公开(公告)号:CN117056350A
公开(公告)日:2023-11-14
申请号:CN202311093350.2
申请日:2023-08-29
Applicant: 江苏苏宁银行股份有限公司
IPC: G06F16/242 , G06F16/2455 , G06F16/22
Abstract: 本发明涉及数据分析技术领域,公开了一种基于自适应的多维分析动态加速方法、系统及装置,其技术方案要点是包括如下步骤:根据动态加速指令,基于数仓中的事实表,构建逻辑模型表,定义逻辑模型表的维度、度量以及计算逻辑;为非可加性指标,建立虚拟计算度量,所述虚拟计算度量通过编程语句定义计算逻辑,所述非可加性指标对应所述虚拟计算度量的总和;为逻辑模型表关联明细表和预汇总表,根据常用分析场景,获取常用查询维度组合,并定义所述预汇总表的维度和度量,所述预汇总表用于为常用查询维度组合进行预计算;响应于查询语句的查询命令,判断是否有与查询语句对应的预汇总表,若有,则路由至对应的预汇总表,若否,则路由至明细表。
-