-
公开(公告)号:CN113836224A
公开(公告)日:2021-12-24
申请号:CN202111044619.9
申请日:2021-09-07
Applicant: 南方电网大数据服务有限公司
IPC: G06F16/27 , G06F16/182 , G06F16/178
Abstract: 本申请涉及一种OGG到HDFS的同步文件处理方法、装置、计算机设备和存储介质。所述方法包括:基于OGG软件对通过OGG软件到HDFS的同步文件的滚动切换时间和文件大小进行限制;基于配置完成的OGG软件,以业务系统产生的增量数据作为同步文件,将所述同步文件准实时同步至HDFS;基于HDFS对通过OGG软件获取的同步文件进行遍历,筛选出所述同步文件中的小文件,并对所述小文件进行合并处理。采用本方法能够提高hadoop集群的稳定性。
-
公开(公告)号:CN115525406A
公开(公告)日:2022-12-27
申请号:CN202210741769.3
申请日:2022-06-28
Applicant: 南方电网大数据服务有限公司
IPC: G06F9/48 , G06F9/50 , G06F11/30 , G06F11/32 , G06F16/21 , G06F16/2453 , G06F16/28 , G06F3/0486
Abstract: 本发明公开了一种分布式异步任务调度系统,其特征在于,包括:接口调用模块,用于接收和创建任务请求,通过赋予用户有期限的令牌,在期限范围内,用户使用令牌通过接口API的方式去调度与执行任务,或发送创建工作流的请求;dolphinscheduler调度平台,用于对任务或工作流进行调度与监控;Web可视化操作平台,用于为用户提供任务或工作流的可视化管理,以及提供关于任务或工作流的数据支撑;数据存储模块DB,用于存储api发送的相关请求,工作流的日志信息与Web可视化操作平台的功能模块配置信息;与现有技术相比,本发明结构简单、易于实现、与大数据相关的组件有更强的兼容性。
-
公开(公告)号:CN115146072A
公开(公告)日:2022-10-04
申请号:CN202210795292.7
申请日:2022-07-07
Applicant: 南方电网大数据服务有限公司
IPC: G06F16/36 , G06F40/289 , G06F40/284 , G06F40/211 , G06F40/295
Abstract: 本申请涉及一种电力领域中知识地图的绘制方法。方法包括:获取电力知识对应的描述文本,并从描述文本中提取与电力知识相关的描述特征,描述特征包括电力知识对应的概念、属性以及约束中的至少一个;对电力知识相关的描述特征进行显式处理,并基于预设的本体表示分类,以对提取到的电力知识的描述特征进行本体表示;根据与电力知识相关的预设的词性和句法关系标注集,基于本体表示,提取电力知识对应描述文本中各实体之间对应的关联关系;将关联关系输入到电力知识对应的可视化插件进行解析以及页面上地图节点的渲染,生成电力知识对应的知识地图。采用本方法能够提高与电力知识相关的知识地图的使用率和准确率。
-
公开(公告)号:CN114297274A
公开(公告)日:2022-04-08
申请号:CN202111470058.9
申请日:2021-12-03
Applicant: 南方电网大数据服务有限公司
Abstract: 本申请涉及一种大数据抽取方法、装置、计算机设备、存储介质和计算机程序产品。所述方法包括:获取目标业务系统的系统类别和表信息;根据预设的系统类别与数据库类型之间的第一对应关系,以及所述目标业务系统的系统类别,确定所述目标业务系统的数据库类型;根据所述目标业务系统的数据库类型确定目标业务系统的目标数据库字段类型;根据所述目标业务系统的目标数据库字段类型和所述目标业务系统的表信息,通过数据字典抽取脚本进行抽取,生成目标业务系统的数据字典;通过预设的数据采集脚本和所述目标业务系统的数据字典,读取所述目标业务系统中的数据。采用本方法能够提高数据抽取效率。
-
公开(公告)号:CN116015798A
公开(公告)日:2023-04-25
申请号:CN202211616322.X
申请日:2022-12-15
Applicant: 南方电网大数据服务有限公司
IPC: H04L9/40 , H04L67/1097
Abstract: 本发明涉及一种基于混合云共享的虚拟云平台管理系统,所述的基于混合云共享的虚拟云平台管理系统包括混合云管理系统、云间服务协议、私有云管理系统、云存储系统以及诺干私有云终端;本发明通过在混合云管理系统内设置共享开放混合云单元和共享加密混合云单元,对私有云管理系统的信息进行分开存放,共享开放混合云单元内的信息可随时进行查看,而共享加密混合云单元的信息则需要进一步的请求认证后才能进行查看,不仅在共享的基础上增加了共性共享数据的共享,而且对于私密的共享信息则起到安全的作用,同时由于是在共享的基础上进行的,所以运维及管理工作都会大大降低。
-
公开(公告)号:CN113919741A
公开(公告)日:2022-01-11
申请号:CN202111288953.9
申请日:2021-11-02
Applicant: 南方电网大数据服务有限公司
Abstract: 本申请涉及电力信息分析技术领域,提供了一种空置房屋确定方法、装置、计算机设备和存储介质。本申请能够实现准确确定空置房屋。该方法包括:获取房屋群中各房屋的档案信息和用电量,档案信息包括房屋类型,将各房屋的档案信息和用电量中满足预设筛选条件的房屋的档案信息和用电量作为空置房屋影响因素数据,将空置房屋影响因素数据输入至预先构建的阈值分析模型,得到各房屋类型对应的用电量阈值,根据房屋群中各房屋的用电量以及各房屋类型对应的用电量阈值,确定房屋群中的空置房屋。
-
公开(公告)号:CN116842407A
公开(公告)日:2023-10-03
申请号:CN202310799437.5
申请日:2023-06-30
Applicant: 南方电网大数据服务有限公司
IPC: G06F18/23 , G06F18/25 , G06Q50/06 , G06Q50/18 , G06Q10/0639 , G06Q10/04 , G06F17/11 , G06F17/18
Abstract: 本发明提供一种基于多源数据识别园区内重点产业链节点的方法、存储介质及系统,该方法包括:从不同数据系统获取园区内各个企业的多源数据,对园区内各个企业的多源数据分别进行融合对齐处理;根据多源数据分析园区内各个企业所属的产业链及在产业链中所处的产业链节点;根据多源数据计算园区内各个企业的多项重点识别指标;根据园区内各个企业的各项重点识别指标,对园区内各个企业所处的产业链节点进行聚类分析及重点产业链节点识别。这样就可识别出园区内需引入企业的重点产业链节点,为园区招商过程中的企业筛选引入提供参考,提高园区招商目标与园区内的产业链适配度,以实现园区稳定有序的长期发展。
-
公开(公告)号:CN115017885A
公开(公告)日:2022-09-06
申请号:CN202210794586.8
申请日:2022-07-07
Applicant: 南方电网大数据服务有限公司
IPC: G06F40/211 , G06F40/295 , G06F40/289 , G06F40/216 , G06F40/284 , G06F16/35 , G06F16/36
Abstract: 本申请涉及一种从电力领域的文本中抽取实体关系的方法。方法包括:获取电力领域对应的目标文本,并基于目标文本进行与电力领域相关的结构化分析,确定电力领域对应的非结构化部分,非结构化部分为目标文本中各标题下的文本内容;对非结构化部分对应的非结构化文本进行标引,并基于标引后的非结构化文本确定目标文本中对应的独立的句子成分、被单向依赖的句子成分、双向依赖的句子成分,得到电力领域对应的目标文本中的知识三元组;基于知识三元组中的各核心动词进行实体关系的标定,以对知识三元组进行优化,得到优化后的知识三元组对应的电力领域实体关系。采用本方法能够提高了电力领域实体关系的抽取质量和效率。
-
公开(公告)号:CN113836224B
公开(公告)日:2024-07-26
申请号:CN202111044619.9
申请日:2021-09-07
Applicant: 南方电网大数据服务有限公司
IPC: G06F16/27 , G06F16/182 , G06F16/178
Abstract: 本申请涉及一种OGG到HDFS的同步文件处理方法、装置、计算机设备和存储介质。所述方法包括:基于OGG软件对通过OGG软件到HDFS的同步文件的滚动切换时间和文件大小进行限制;基于配置完成的OGG软件,以业务系统产生的增量数据作为同步文件,将所述同步文件准实时同步至HDFS;基于HDFS对通过OGG软件获取的同步文件进行遍历,筛选出所述同步文件中的小文件,并对所述小文件进行合并处理。采用本方法能够提高hadoop集群的稳定性。
-
公开(公告)号:CN116842406A
公开(公告)日:2023-10-03
申请号:CN202310798804.X
申请日:2023-06-30
Applicant: 南方电网大数据服务有限公司
IPC: G06F18/23 , G06F18/24 , G06Q30/08 , G06Q10/0639 , G06F40/289 , G06F18/214 , G06Q10/10
Abstract: 本发明提供一种基于招投标信息的产业链网络构建方法、存储介质及系统,该方法包括如下步骤:采集多项企业信息,其中每项企业信息包括企业名称、经营范围信息和招投标信息;根据多项企业信息构建产业链网络;识别产业链网络中的核心节点;识别产业链网络中的每个节点所对应的企业特征;在产业链网络中可视化更新核心节点与每个节点的企业特征。这样基于该产业链网络除了可确定每个节点对应的企业的行业归属、企业在产业链中所处的位置之外,基于核心节点还可确定产业链的所有企业当中的核心企业,基于每个节点的企业特征还可确定产业链的所有企业的主营业务信息,这有助于外界更加深入了解产业链网络,能为外界决策提供有效支持。
-
-
-
-
-
-
-
-
-