-
公开(公告)号:CN106844556A
公开(公告)日:2017-06-13
申请号:CN201611265634.5
申请日:2016-12-30
Applicant: 江苏瑞中数据股份有限公司
Inventor: 王远 , 谢玉波 , 唐胜 , 包建国 , 曹健 , 陈辛明 , 程飞飞 , 何世春 , 孔炜 , 李强 , 秦鹏飞 , 陶霞 , 王乐之 , 王为明 , 韦程 , 张操政 , 张巍
IPC: G06F17/30
CPC classification number: G06F17/30191 , G06F17/30091 , G06F17/30194
Abstract: 本发明公开了一种基于HBase的智能电网时标量测数据存储方法,包括以下步骤:根据量测点的时标和业务模型建立时标量测数据存储模型;采用WAL技术完成对数据记录的加载从而实现将请求加载的数据全部加载到存储模型中;根据量测点规模和数据产生频率,建立数据分区机制,当存储模型中数据量达到分区条件时,实现动态预分区;针对数据规模大、数据产生持续性强的时标量测数据,实现数据高速加载,满足时标量测数据快速加载;采用WAL技术,确保系统异常崩溃时,可通过日志文件快速恢复数据,提升数据加载的可靠性;根据量测点规模和数据产生频率,建立灵活的数据分区机制,确保大量数据分布式访问,提升数据访问性能。
-
公开(公告)号:CN107506475A
公开(公告)日:2017-12-22
申请号:CN201710803201.9
申请日:2017-09-08
Applicant: 国网辽宁省电力有限公司 , 国网辽宁省电力有限公司电力科学研究院 , 江苏瑞中数据股份有限公司 , 国家电网公司
CPC classification number: G06F17/30705 , G06F17/2735 , G06F17/2765 , G06F17/30194 , G06Q50/06
Abstract: 本发明涉及一种对客户服务文本的分类方法,特别是一种基于Spark的海量电力客户服务文本分类方法。随着智能电网技术的不断发展,电网企业发挥数据资源的战略资产作用,关键在于提升海量数据的管理和支撑能力,实现信息共享,为企业管理提供运营决策分析支持。本发明通过建立电力客户服务情感词典,对客服工单进行分词,分词后的数据存储至HDFS文件,运用Spark从中加载并转换成RDD,预处理后用改良的分类算法进行训练得出模型。本方法可以大幅提升工单数据的分类分析的准确性和高效性,以挖掘客户的真实诉求。
-
公开(公告)号:CN107506448A
公开(公告)日:2017-12-22
申请号:CN201710744540.4
申请日:2017-08-25
Applicant: 国网辽宁省电力有限公司 , 国网辽宁省电力有限公司电力科学研究院 , 江苏瑞中数据股份有限公司 , 国家电网公司
IPC: G06F17/30
CPC classification number: G06F17/30569
Abstract: 本发明涉及一种电网中数据交换格式的方法及系统,特别是涉及智能电网中时标量测数据的交换格式。本发明设计的格式抽象了智能电网中所有的监测设备产生的数据格式,将从多个源服务器重抽取的数据以全新的命名规则建立E文件来进行数据共享和交换,从而规范和统一各系统进行数据共享和交换的格式,降低各系统数据对接的复杂性。
-
公开(公告)号:CN107623645B
公开(公告)日:2021-04-27
申请号:CN201710798281.3
申请日:2017-09-07
Applicant: 国网辽宁省电力有限公司 , 国网辽宁省电力有限公司电力科学研究院 , 江苏瑞中数据股份有限公司 , 国家电网公司
IPC: H04L12/947 , H02J3/00 , G06F9/54 , G06F5/06
Abstract: 本发明涉及一种基于数据流转发的电力系统实时数据交换系统。随着电网的技术进步与业务发展,智能电网系统不断细化,内容越来越多。现有技术方案支持将数据写入硬盘,但这大大降低了中转速度;而且现有技术对大文件转发支持不足,难以满足电网体系下数据量大、交互次数多、复杂度高的信息传递要求。本发明针对智能电网数据交换特征,实现了基于数据流转发的准实时数据交换中间件,解决了智能电网应用系统地理分布广、数据集成规模大、及时性要求高、集成技术和管理不统一的难题。该技术能应用于多级部门业务应用间数据集成,能够显著提高部门间大批量的信息交流传递的速度,有效提高工作效率。
-
公开(公告)号:CN107644060A
公开(公告)日:2018-01-30
申请号:CN201710742995.2
申请日:2017-08-25
Applicant: 国网辽宁省电力有限公司 , 国网辽宁省电力有限公司电力科学研究院 , 江苏瑞中数据股份有限公司 , 国家电网公司
IPC: G06F17/30
Abstract: 本发明涉及一种基于E-R分片策略的智能电网跨节点join方法。传统分布式关系库采用水平切分的方式来对数据表进行分片,就是将表中的某些行切分到一个数据库,而另外的某些行又切分到其他的数据库中,这种切分方式带来了一些缺点:(1)拆分规则难以抽象;(2)分片事务一致性难以解决;(3)数据多次扩展难度跟维护量极大;(4)跨库join性能较差。本发明针对于分布式关系库表分片数据的特征,其目的在于解决分布式数据库表数据分片(根据E-R关系进行分片);分布式数据库数据表join效率提升(根据E-R关系分片的数据在进行join操作时基本可以避免跨库操作);最终,设计一种满足于分布式关系数据库数据表高效分片和join操作的方法。
-
公开(公告)号:CN107623645A
公开(公告)日:2018-01-23
申请号:CN201710798281.3
申请日:2017-09-07
Applicant: 国网辽宁省电力有限公司 , 国网辽宁省电力有限公司电力科学研究院 , 江苏瑞中数据股份有限公司 , 国家电网公司
IPC: H04L12/947 , H02J3/00 , G06F9/54 , G06F5/06
Abstract: 本发明涉及一种基于数据流转发的电力系统实时数据交换系统。随着电网的技术进步与业务发展,智能电网系统不断细化,内容越来越多。现有技术方案支持将数据写入硬盘,但这大大降低了中转速度;而且现有技术对大文件转发支持不足,难以满足电网体系下数据量大、交互次数多、复杂度高的信息传递要求。本发明针对智能电网数据交换特征,实现了基于数据流转发的准实时数据交换中间件,解决了智能电网应用系统地理分布广、数据集成规模大、及时性要求高、集成技术和管理不统一的难题。该技术能应用于多级部门业务应用间数据集成,能够显著提高部门间大批量的信息交流传递的速度,有效提高工作效率。
-
公开(公告)号:CN107609085A
公开(公告)日:2018-01-19
申请号:CN201710798269.2
申请日:2017-09-07
Applicant: 国网辽宁省电力有限公司 , 国网辽宁省电力有限公司电力科学研究院 , 江苏瑞中数据股份有限公司 , 国家电网公司
Abstract: 本发明一种基于大数据技术的智能电网量测数据处理方法及系统。随着智能电网信息化不断发展,调度自动化和采集监测类系统积累了海量的电网量测数据。目前采用的传统关系型数据库用于电力信息系统量测数据存储,存在处理效率低的问题。本发明针对传统关系型数据库用于电力信息系统量测数据处理效率低的问题,设计并实现了基于大数据技术的量测数据处理系统。
-
公开(公告)号:CN107656971A
公开(公告)日:2018-02-02
申请号:CN201710781859.4
申请日:2017-09-02
Applicant: 国网辽宁省电力有限公司 , 国网辽宁省电力有限公司电力科学研究院 , 江苏瑞中数据股份有限公司 , 国家电网公司
IPC: G06F17/30
CPC classification number: G06F17/30339 , G06F17/30575
Abstract: 本发明涉及智能电网的数据存储方法,特别是涉及智能电网中一种基于Redis的采集监测数据的存储方法。智能电网采集监测数据作为智能电网四大数据类型的重要组成部分,具有数据量大,存储周期跨度长、数据格式固定、数据加载吞吐量要求高、访问模式以断面查询和批量查询为主、对稳定性要求高、历史数据规模不断增大等特点。针对以上特征,本发明提出了一种基于Redis的智能电网采集监测数据分布式Key-Value存储方法,可以大幅提升采集监测数据的加载和访问性能,同时保证系统的可靠性。
-
-
-
-
-
-
-