-
公开(公告)号:CN111541747B
公开(公告)日:2023-05-12
申请号:CN202010278356.7
申请日:2020-04-10
Applicant: 深圳前海微众银行股份有限公司
IPC: H04L67/1095 , H04L67/568 , H04L49/90
Abstract: 本发明公开了一种数据的检查点设置方法及装置,其中方法为:根据待传输流式数据,获取所述待传输流式数据的各缓存块;所述各缓存块中任一缓存块包括缓存数据和所述缓存数据在所述待传输流式数据中的归属信息;传输所述各缓存块,并在所述各缓存块的传输过程中,记录所述各缓存块的归属信息,作为所述待传输流式数据的检查点记录信息,从而设置所述待传输流式数据的检查点。上述方法应用于金融科技(Fintech)时,可以将所述待传输流式数据化整为零,更细粒度地设置所述待传输流式数据的检查点,从而更加及时地对同步传输的数据实现CheckPoint机制。
-
公开(公告)号:CN115617852A
公开(公告)日:2023-01-17
申请号:CN202211218068.8
申请日:2022-09-30
Applicant: 深圳前海微众银行股份有限公司
IPC: G06F16/2455
Abstract: 本申请提供一种数据规则匹配方法、设备及存储介质,方法包括:获得规则知识库中的多个第一元数据;其中,每一第一元数据包括数据库表的索引标识,以及与索引标识关联的规则类型对应的规则标识;确定并统计每一索引标识中的索引子标识对应的索引子标识数量,并获得同一索引子标识数量在所有索引子标识数量中出现的第一频次;对所有第一频次进行筛选处理,并基于筛选后的第一频次对应的索引子标识数量,得到用于决策项集包含的子标识的目标子标识数量的第一数据范围;基于第一数据范围,对第一元数据中的所有子标识进行组合并筛选处理,得到目标子标识数量项集;基于目标子标识数量项集,确定获得的待匹配索引信息匹配规则所得到的匹配结果。
-
公开(公告)号:CN115599975A
公开(公告)日:2023-01-13
申请号:CN202211208626.2
申请日:2022-09-30
Applicant: 深圳前海微众银行股份有限公司(CN)
IPC: G06F16/906 , G06F16/28 , G06F16/901
Abstract: 本申请实施例提供了一种数据表分类方法、装置、设备及存储介质,涉及大数据处理技术领域,该方法包括:从多个预设关键词中确定出与数据表的各维度表信息匹配的至少一个目标关键词,针对任一目标关键词,基于分类标签对应关系,确定目标关键词对应的目标分类标签,以及目标关键词与目标分类标签相关联的多维度卡方值。最后,基于每个目标关键词对应的目标分类标签以及每个目标关键词与目标分类标签相关联的多维度卡方值,确定数据表的分类结果,而不再是依赖人工经验,提高了数据表分类结果的准确性,进而保证了数据表划分至对应的数仓分层的准确性。
-
公开(公告)号:CN110347560B
公开(公告)日:2022-04-26
申请号:CN201910658814.7
申请日:2019-07-19
Applicant: 深圳前海微众银行股份有限公司
Abstract: 本发明涉及金融科技(Fintech)的大数据技术领域,本发明公开了一种大数据产品的异常提示方法,包括:在检测到大数据产品出现异常时,获取异常对应的错误信息;调用错误码客户端SDK,通过错误码客户端SDK向错误码服务器请求大数据产品对应的异常与错误码映射关系表;在异常与错误码映射关系表请求成功时,通过错误码客户端SDK根据异常与错误码映射关系表实例化出错误码处理器;通过错误码处理器处理错误信息,得到与错误信息匹配的错误码和错误描述并输出。本发明还公开了一种大数据产品的异常提示装置、系统、设备及介质。本发明将大数据产品的错误信息转化为错误码和错误描述,方便运维人员查看,提高了效率。
-
公开(公告)号:CN114296739A
公开(公告)日:2022-04-08
申请号:CN202111636575.9
申请日:2021-12-29
Applicant: 深圳前海微众银行股份有限公司
IPC: G06F8/41 , G06F16/242
Abstract: 本申请涉及金融科技(Fintech)领域,并公开了一种工作流转换的方法及装置,用于解决现有技术中流式应用的开发门槛较高的问题。其中,方法包括:获取工作流的描述信息,工作流的描述信息中包括用户在显示界面中定义的多个节点的数据信息和连接信息,其中,节点的数据信息中包括节点类型和数据内容中的一项或多项,节点的连接信息用于指示节点在多个节点中的依赖关系;根据多个节点的数据信息和连接信息,对多个节点依次执行节点转换,得到多个节点对应的Flink语句;将多个节点对应的Flink语句,组成流式应用。
-
公开(公告)号:CN113344548A
公开(公告)日:2021-09-03
申请号:CN202110731532.2
申请日:2021-06-30
Applicant: 深圳前海微众银行股份有限公司
IPC: G06Q10/10
Abstract: 本申请实施例提供了一种工作流生成方法、装置、设备及存储介质,涉及金融科技(Fintech)技术领域,该方法包括:调度系统接收针对第一工作流的任务调整指令后,通过执行针对至少一个待调整任务的目标调整操作,获得第一工作流的初步调整结果,然后调整初步调整结果中各个任务的优先级,自动获得第二工作流,相较于在工作流中的任务发生变动时,用户手动修改工作流来说,本申请自动调整工作流的方式可以有效提高工作流的生成和调整效率,同时给用户带来便利。
-
公开(公告)号:CN113326264A
公开(公告)日:2021-08-31
申请号:CN202110653633.2
申请日:2021-06-11
Applicant: 深圳前海微众银行股份有限公司
IPC: G06F16/22 , G06F16/23 , G06F16/2458
Abstract: 本发明实施例提供了一种数据处理方法、服务器及存储介质,该方法包括:接收数据存储请求;所述数据存储请求中携带至少一类标识和配置信息;基于所述至少一类标识,构造出第一标签;为所述第一标签分配第一索引值;将所述第一标签和所述第一索引值关联存储至第一数据表,以及将所述第一索引值和所述数据存储请求中携带的配置信息,关联存储至第二数据表;所述配置信息用于配置大数据引擎。
-
公开(公告)号:CN112346871A
公开(公告)日:2021-02-09
申请号:CN202011327754.X
申请日:2020-11-24
Applicant: 深圳前海微众银行股份有限公司
Abstract: 本发明涉及金融科技(Fintech)领域,公开一种请求处理方法及微服务系统,微服务系统接收第一客户端发送的携带第一资源标识的第一请求;若确定第一资源标识中未携带服务实例标识,则为第一请求分配第一服务实例;通过第一服务实例从数据库获取第一资源标识所指示的第一资源;将第一资源发送至第一客户端并将第一资源缓存在第一服务实例;根据第一服务实例的第一服务实例标识更新第一资源标识,得到用于指示第一资源的第二资源标识。该方式微服务系统通过为某一资源的请求确定一服务实例,并由该服务实例在从数据库中获取到该资源后对资源进行缓存,便于后续的关于该资源的请求再次到达微服务系统的时候,直接由该服务实例对请求进行响应。
-
公开(公告)号:CN111708495A
公开(公告)日:2020-09-25
申请号:CN202010564489.0
申请日:2020-06-19
Applicant: 深圳前海微众银行股份有限公司
IPC: G06F3/06
Abstract: 本申请公开了一种环形队列存储方法、装置及计算设备、存储介质,涉及数据处理技术领域,当队列在第一预设时长内的工作状态持续为队列满,则确定队列的扩容位置并在扩容位置扩容指定长度的扩容数组,之后将扩容位置存储的元素存储至扩容数组的第一个下标所在的位置,并在扩容位置存储用于指向扩容数组的扩容标识。相对于现有技术队列固定的存储空间,本申请提供的环形队列存储方式,可扩展队列的的存储空间,提高了队列的配置效率,且更加适配程序的存储需求。
-
公开(公告)号:CN110825634A
公开(公告)日:2020-02-21
申请号:CN201911066962.6
申请日:2019-11-04
Applicant: 深圳前海微众银行股份有限公司
IPC: G06F11/36
Abstract: 本发明涉及金融科技(Fintech)技术领域,本发明公开了一种参数质量校验方法,该方法包括:在接收到参数校验请求时,获取预设模板库中所述参数校验请求对应的校验模板;获取所述校验模板对应的参数信息,将所述参数信息中的参数添加到所述校验模板中,生成校验规则;运行所述校验规则,对所述校验模板中的参数进行校验,输出参数质量校验结果。本发明还公开了一种参数质量校验装置、设备及计算机可读存储介质。本发明提高了参数质量校验的准确率和效率。
-
-
-
-
-
-
-
-
-