-
公开(公告)号:CN105138686B
公开(公告)日:2018-09-28
申请号:CN201510592013.7
申请日:2015-09-17
Applicant: 国家电网公司 , 南京南瑞集团公司 , 南京南瑞信息通信科技有限公司 , 江苏省电力公司信息通信分公司 , 国网辽宁省电力有限公司信息通信公司
IPC: G06F17/30
Abstract: 本发明公开了一种用于多级存储数据的即时应用方法,包括以下步骤,步骤一,业务对象建模;步骤二,分布式对象缓存;步骤三,启动分布式数据请求;步骤四,动态路由;步骤五,代理计算;步骤六,汇总和聚合计算。本发明相比于现有技术,具有扩展性能好,任务实时性能高,多维度多角度数据分析查询灵活,为OMS系统报表展现提供实时数据抽取,避免了分散数据人工填报工作量,能快速变更报表维度及查询条件,比较友好地拖拽式构建查询报表。
-
公开(公告)号:CN104376109B
公开(公告)日:2018-09-14
申请号:CN201410700945.4
申请日:2014-11-28
Applicant: 国家电网公司 , 南京南瑞集团公司 , 南京南瑞信息通信科技有限公司 , 江苏省电力公司信息通信分公司
Abstract: 本发明公开了一种基于数据分布库的多维度数据分布及方法,属于电网数据处理技术领域。本发明首先分析业务逻辑,分析出业务功能和数据库中的表之间的逻辑关系,然后确定水平或垂直分布,根据业务分析结果,确定数据整体拆分原则,对于简单逻辑的系统宜采用垂直分布策略,对于复杂逻辑的系统宜采用水平分布策略,接着确定多维度混合分布,结合业务逻辑,组合数据分布库中的分布策略成最佳的混合分布;并确定多维度分布的数据块的最细粒度,通过分析集群节点的存储空间,利用最大公约原则来确定数据块的最细粒度;最后实现数据分布。本发明能够实现高性能的数据查询与分析,满足用户对大数据处理的实时性需求。
-
公开(公告)号:CN105183917B
公开(公告)日:2018-06-05
申请号:CN201510665975.0
申请日:2015-10-15
Applicant: 国家电网公司 , 南京南瑞集团公司 , 南京南瑞信息通信科技有限公司 , 江苏省电力公司信息通信分公司 , 国网辽宁省电力有限公司信息通信公司
IPC: G06F17/30
Abstract: 本发明公开了一种用于多级存储数据的多维分析方法,步骤一,构建统一数据模型;步骤二,构建多维分析模型;步骤三,多维分析计算和展现;计算引擎把多维分析模型按照路由信息自动生成下级计算节点对应的聚合计算语句,并由计算代理执行聚合操作,生成预聚合结果并上传到主控服务器,然后执行二次聚合计算,生成多维计算结果集;计算引擎根据多维分析模型,结合统一数据模型,形成维度成员查询算法,查询出维度成员,生成展现报表的单元格对象,并把多维分析结果填充到单元格对象中,实现多维分析结果的多维度展示。本发明多维分析方法能够实现分级存储数据的实时多维分析,不需要事先把数据集中起来。
-
公开(公告)号:CN105183917A
公开(公告)日:2015-12-23
申请号:CN201510665975.0
申请日:2015-10-15
Applicant: 国家电网公司 , 南京南瑞集团公司 , 南京南瑞信息通信科技有限公司 , 江苏省电力公司信息通信分公司
IPC: G06F17/30
Abstract: 本发明公开了一种用于多级存储数据的多维分析方法,步骤一,构建统一数据模型;步骤二,构建多维分析模型;步骤三,多维分析计算和展现;计算引擎把多维分析模型按照路由信息自动生成下级计算节点对应的聚合计算语句,并由计算代理执行聚合操作,生成预聚合结果并上传到主控服务器,然后执行二次聚合计算,生成多维计算结果集;计算引擎根据多维分析模型,结合统一数据模型,形成维度成员查询算法,查询出维度成员,生成展现报表的单元格对象,并把多维分析结果填充到单元格对象中,实现多维分析结果的多维度展示。本发明多维分析方法能够实现分级存储数据的实时多维分析,不需要事先把数据集中起来。
-
公开(公告)号:CN105138686A
公开(公告)日:2015-12-09
申请号:CN201510592013.7
申请日:2015-09-17
Applicant: 国家电网公司 , 南京南瑞集团公司 , 南京南瑞信息通信科技有限公司 , 江苏省电力公司信息通信分公司
IPC: G06F17/30
Abstract: 本发明公开了一种用于多级存储数据的即时应用方法,包括以下步骤,步骤一,业务对象建模;步骤二,分布式对象缓存;步骤三,启动分布式数据请求;步骤四,动态路由;步骤五,代理计算;步骤六,汇总和聚合计算。本发明相比于现有技术,具有扩展性能好,任务实时性能高,多维度多角度数据分析查询灵活,为OMS系统报表展现提供实时数据抽取,避免了分散数据人工填报工作量,能快速变更报表维度及查询条件,比较友好地拖拽式构建查询报表。
-
公开(公告)号:CN105243163A
公开(公告)日:2016-01-13
申请号:CN201510744670.9
申请日:2015-11-05
Applicant: 国家电网公司 , 南京南瑞集团公司 , 国网江苏省电力公司信息通信分公司 , 南京南瑞集团公司信息系统集成分公司
IPC: G06F17/30
CPC classification number: G06F16/219
Abstract: 本发明提供一种历史数据归档集成系统及方法,设置生产库与在线历史库实时同步,所述在线历史库读写分离;分布存储所述生产库与所述在线历史库;为所述在线历史库设置数据库资源池,所述数据库资源池采用集群的方式管理。发明为客户提供多元化组合解决方案,以达到对数据全生命周期管理,在系统开发厂商及运维方配合下合理规划集成平台建设。
-
公开(公告)号:CN105787090A
公开(公告)日:2016-07-20
申请号:CN201610147684.7
申请日:2016-03-15
Applicant: 国网信息通信产业集团有限公司 , 江苏省电力公司信息通信分公司 , 中国科学院计算技术研究所 , 国网浙江省电力公司 , 国网辽宁省电力有限公司 , 南京南瑞集团公司 , 国家电网公司
CPC classification number: G06F16/182 , G06F16/13 , G06Q50/06
Abstract: 根据上述技术方案可以看出,本申请提供了一种电力数据的OLAP系统的索引建立方法和系统,所述方法根据所述电力数据中的档案类数据建立前缀树;根据所述前缀树的叶节点,对所述电力数据中的用采数据在数据文件中进行重组,在所述数据文件中生成多个数据片;确定各个所述数据片在所述数据文件中的数据片位置,并建立所述数据片位置与所述前缀树的叶节点之间的映射关系,作为所述电力数据的OLAP系统的索引。可见,通过建立OLAP的索引,对用采数据进行数据重组,提升了数据顺序读取效率,且按照用采数据最细粒度构建索引,在查询时可以过滤无关数据,提升了查询性能,使得查询的效率大大的提高。
-
公开(公告)号:CN105677761A
公开(公告)日:2016-06-15
申请号:CN201511021428.5
申请日:2015-12-30
Applicant: 国网信息通信产业集团有限公司 , 江苏省电力公司信息通信分公司 , 南京南瑞集团公司 , 国家电网公司
IPC: G06F17/30
CPC classification number: G06F16/278
Abstract: 本发明公开了一种数据切分的方法,包括:根据数据的实际情况,选择相应的分区模式进行数据切分;当需要确保数据库的稳定性并且业务数据属于读多写少的情况,则根据应用发起的数据切分请求,选择读写分离的分区模式对数据进行切分;当单台数据库的硬件资源足够,但是单张表的数据超过阈值时,则根据应用发起的数据切分请求,选择单库分表的分区模式对数据进行切分;当单台数据库的硬件资源不足时,则根据应用发起的数据切分请求,选择多库分表的分区模式对数据进行切分;该方法能够在数据量很大,数据急速膨胀的情况下,提高数据库的读写性能,提高数据库的效率;本发明还公开了一种数据切分的系统。
-
公开(公告)号:CN107423190A
公开(公告)日:2017-12-01
申请号:CN201710256875.1
申请日:2017-04-19
Applicant: 国家电网公司 , 国网江苏省电力公司信息通信分公司 , 国网电子商务有限公司
Inventor: 夏飞 , 刘俊恺 , 周静 , 王毅 , 张立强 , 余伟 , 吴立斌 , 张明明 , 李鹏 , 季晓凯 , 蒋铮 , 王艳青 , 彭轼 , 魏桂臣 , 丁一新 , 张利 , 李萌 , 黄高攀 , 汤雷
IPC: G06F11/30
Abstract: 本发明公开了一种日志数据异常指向识别方法,该方法包括:设置日志数据异常的采样与提取规则,获得所述日志中的异常数据;对所述异常数据进行模式化处理,得到所述异常数据与其对应的异常标签的匹配关系;设置异常模式的损失函数,计算获得使所述损失函数的值最小的参数值;根据所述参数值生成数据异常判别函数,判断获得所述异常数据的指向。通过本发明实现了对海量日志数据分析并根据数据异常快速定位异常所在根源的目的。
-
公开(公告)号:CN106850690A
公开(公告)日:2017-06-13
申请号:CN201710202686.6
申请日:2017-03-30
Applicant: 国家电网公司 , 国网江苏省电力公司信息通信分公司
Inventor: 夏飞 , 周静 , 王毅 , 张立强 , 余伟 , 吴立斌 , 张明明 , 李鹏 , 季晓凯 , 蒋铮 , 王艳青 , 彭轼 , 魏桂臣 , 丁一新 , 张利 , 李萌 , 黄高攀 , 汤雷
IPC: H04L29/06
Abstract: 本发明公开了一种蜜罐构造方法及系统,该系统包括流量分析装置,由协议处理服务装置和主机模拟服务装置构成的蜜罐构造装置,身份认证装置,蜜罐部署装置和日志存储装置,其中,流量分析装置分析获得可疑数据流并发送至蜜罐构造装置,蜜罐构造装置根据可疑流量的属性启动协议处理服务装置或主机模拟服务装置对所述可疑流量进行响应,将响应结果生成对应的日志信息存储至所述日志存储装置。实现了能够自动按需部署蜜罐系统的目的。
-
-
-
-
-
-
-
-
-