一种基于大数据的通用模型动态积分预警方法

    公开(公告)号:CN112395362A

    公开(公告)日:2021-02-23

    申请号:CN202011403841.9

    申请日:2020-12-04

    Abstract: 本发明涉及一种基于大数据的通用模型动态积分预警方法,其包括以下步骤:S1.数据抽取,将不同数据库结构的源数据库同步至目标数据库clickhouse中;S2.基于画布拖拽配置动态积分模型;S3.下发动态积分模型:将动态积分模型的配置参数下发到生产者kafka分区中,实现分布式负载均衡算法;S4.基于动态积分模型,计算实时动态积分。本发明基于画布拖拽生成动态积分配置模型,满足了动态模型配置的灵活性质,同时可以提高大数据计算模型的时效性质,达到秒级预算结果。

    一种软件的微服务化开发方法、系统及风暴企业监测软件

    公开(公告)号:CN116339687A

    公开(公告)日:2023-06-27

    申请号:CN202310131080.3

    申请日:2023-02-17

    Abstract: 本申请提出一种软件的微服务化开发方法和系统,方法包括:构建领域层:将待开发软件的业务范围划分为多个业务领域,识别核心业务领域,在核心业务领域内构建领域模型,用于待开发软件的核心业务处理;构建第一基础设施层;包括统一的API网关;构建第二基础设施层;包括多个封装的数据库和多个封装的通用服务模块,并提供RPC接口;构建应用层;其中,业务需求通过统一的API网关分发至应用层和/或领域层,第二基础设施层通过RPC层为应用层和领域层提供通用服务。本申请还提出应用上述方法或系统的风暴企业监测软件开发方法和系统。上述方法基于DDD理论,实现有效分离需求变更较高的业务,降低现有技术中微服务系统分析和设计过程中的复杂度。

    一种仓湖一体的数据管理系统和方法

    公开(公告)号:CN116303818A

    公开(公告)日:2023-06-23

    申请号:CN202310110904.9

    申请日:2023-02-14

    Abstract: 本申请提出一种仓湖一体的数据管理系统和方法,系统包括:运营管理层,提供可视化界面用于用户配置数据库类型和仓湖性能阈值,数据库类型为数据仓、数据湖和仓湖一体中的一种,仓湖性能包括每秒查询率、每秒处理量和数据量;数据接入层,提供数据接口用于接入数据并根据配置进行数据标准化处理;基础层,根据当前的数据库类型采用对应的数据管理组件;其中,运营管理层还包括仓湖性能配置单元,配置用于判断当前的仓湖性能,如果超过仓湖性能的阈值,则输出相应的提示并切换当前的数据管理组件和数据库类型。上述方案提供了一个基于策略模式灵活选择当前的数据管理平台的数据存储架构类型,从而提高数据的准确性及稳定性。

    一种跨网段应用部署方法及终端
    5.
    发明公开

    公开(公告)号:CN115061707A

    公开(公告)日:2022-09-16

    申请号:CN202210684966.6

    申请日:2022-06-14

    Abstract: 本发明公开一种跨网段应用部署方法及终端,接收跨网段应用部署请求;根据所述跨网段应用部署请求判断PaaS层是否存在,若所述PaaS层不存在,则对所述PaaS层进行部署,并判断DaaS层是否存在;若所述PaaS层存在,则根据所述跨网段应用部署请求获取编码包,并判断DaaS层是否存在,若所述DaaS层不存在,则基于编码包对所述DaaS层进行全量更新,若所述DaaS层存在,则基于编码包对所述DaaS层进行增量更新,能够使DaaS层以编码包的形式实现自动动态部署、升级,减少容器化部署所需的容器数量,且支持增量更新,提高了部署效率,以此在跨网段中实现应用版本及时迭代升级,且无需运维知识,减少了人工升级成本,实现了操作简单且高效的应用部署。

    一种基于大数据的通用模型动态积分预警方法

    公开(公告)号:CN112395362B

    公开(公告)日:2022-07-15

    申请号:CN202011403841.9

    申请日:2020-12-04

    Abstract: 本发明涉及一种基于大数据的通用模型动态积分预警方法,其包括以下步骤:S1.数据抽取,将不同数据库结构的源数据库同步至目标数据库clickhouse中;S2.基于画布拖拽配置动态积分模型;S3.下发动态积分模型:将动态积分模型的配置参数下发到生产者kafka分区中,实现分布式负载均衡算法;S4.基于动态积分模型,计算实时动态积分。本发明基于画布拖拽生成动态积分配置模型,满足了动态模型配置的灵活性质,同时可以提高大数据计算模型的时效性质,达到秒级预算结果。

    一种数据库表数据导入导出方法、终端设备及存储介质

    公开(公告)号:CN112416907A

    公开(公告)日:2021-02-26

    申请号:CN202011397804.1

    申请日:2020-12-03

    Abstract: 本发明涉及一种数据库表数据导入导出方法、终端设备及存储介质,其中导入方法中包括:S11:根据需要导出数据的第一数据库构建数据库连接配置文件、第一数据库中的数据表信息配置文件和文件导出格式的配置文件,设置导出过程中的并发线程数和导出文件的目录地址;S12:从第一数据库中导出数据,并将导出的数据的转换为统一的编码格式;在导出过程中每隔额定数目条记录生成一个.data数据文件;如果同时导出了索引文件,则每个.data数据文件对应生成一个.index索引文件;将导出的表结构生成.table文件;S13:将导出的所有文件打包为一个文件并压缩后存储。本发明可以同时支持多类主流数据库及其不同版本之间的数据迁移,并且可以进行数据的自动并行操作。

    一种基于大数据通用测试的数据构造方法和系统

    公开(公告)号:CN115729937A

    公开(公告)日:2023-03-03

    申请号:CN202211504419.1

    申请日:2022-11-28

    Abstract: 公开了基于大数据通用测试的数据构造方法和系统,包括选择数据构造读取的协议,协议包括http、tpc、rpc、webservice、mq协议、文件协议、关系型数据库和非关系数据库;根据协议配置数据构造字段生成规则,字段规则包括字段名称、长度、匹配规则、选择样本、是否随机生成、是否关联表、关联表名称、关联表对应字段、日期区间段、是否重复字段、是否查询字段和默认值;基于上述配置信息构建数据构造生成规则,包括配置数据生成时间和数据生成规则;确定数据构造发送协议;通过源端与目标端的数据构造比对,展示数据差异项回溯数据构造的准确性。本申请可提高数据构造的多样性、灵活性、大量性,支持多样化的数据构造处置流程,提供数据生产、发送流程。

    一种数据仓库的数据构建与管理方法及终端

    公开(公告)号:CN114328759A

    公开(公告)日:2022-04-12

    申请号:CN202111622479.9

    申请日:2021-12-28

    Abstract: 本发明公开一种数据仓库的数据构建与管理方法及终端,通过在获取待入库原始数据表后,将待入库原始数据表生成对应的标准数据后再与标准字段表进行映射得到标准表,或直接基于待入库原始数据表创建对应的所述标准数据,从而不需要将库原始数据表和生成的标准数据都存入数据库中,减少了数据库中数据冗余,并且实现数据快速治理入库;同时,还对原始数据表中的字段数据进行过滤、去重、格式转化以及UDF函数处理等处理,使得入库数据高度标准化的同时,也减少了入库数据的冗余,从而能够提高数据抽取效率并降低数据治理成本。

Patent Agency Ranking