-
公开(公告)号:CN105574074A
公开(公告)日:2016-05-11
申请号:CN201510819767.1
申请日:2015-11-23
Applicant: 江苏瑞中数据股份有限公司
IPC: G06F17/30
CPC classification number: G06F16/2219
Abstract: 本发明公开了一种基于智能电网WAMS的时序大数据存储方法,属于实时数据库技术领域。本发明根据WAMS场景建立相应的键-值存储模型作为数据模型,以每秒钟每一个测点创建一个存储单元,存储单元的长度根据WAMS数据的采样频率设置,在数据加载过程中采用预写日志技术,对数据中值进行压缩,而键保持不变,根据加载数据的规模、加载频率,对数据进行分库。本发明能够满足于智能电网WAMS场景的时序大数据快速加载、查询,具有很强的高可靠性。
-
公开(公告)号:CN105577422A
公开(公告)日:2016-05-11
申请号:CN201510766730.7
申请日:2015-11-11
Applicant: 江苏瑞中数据股份有限公司 , 国家电网公司 , 国网冀北电力有限公司信息通信分公司
Abstract: 本发明公开了一种能源互联网的实时数据分析系统及其方法,适用于时效性要求较高的实时流计算以及时效性不高、精确的离线计算。本发明前端采用一种分布式缓存的机制,实现大规模并发数据的高速采集;后端采用一种分布式计算框架的机制,实现业务计算方法的快速实现。本发明既能满足实时流计算又能满足离线计算的通用、高效的计算框架;同时,本发明支持业务计算的水平扩展。
-
公开(公告)号:CN102890722B
公开(公告)日:2015-03-11
申请号:CN201210413154.4
申请日:2012-10-25
Applicant: 国家电网公司 , 江苏瑞中数据股份有限公司
IPC: G06F17/30
Abstract: 本发明公开了一种应用于时序历史数据库的索引方法,以实现时序历史数据库数据的高效存储和检索。本发明通过以时间点为关键字建立多叉树索引,让索引能够按照时间顺序有序地存放在磁盘上索引文件中,时序历史数据也能够按照时间顺序有序地存放在磁盘上数据文件中。在进行数据访问时,通过批量的内存映射文件机制,减少文件访问的频率,保证时序历史数据库数据存储和检索的效率,并且对内存资源的消耗也较小。
-
公开(公告)号:CN103886104A
公开(公告)日:2014-06-25
申请号:CN201410144241.3
申请日:2014-04-11
Applicant: 江苏瑞中数据股份有限公司
CPC classification number: G06F17/30289 , G06Q50/06
Abstract: 本发明公开了一种适用于电力系统的实时数据库管理系统及实现方法,属于数据库技术领域。本发明的实时数据库管理系统包括服务端、实时数据库端和客户端,并利用文件映射、实例ID、版本号、客户端缓存等机制来实现实时数据库的分布式管理。本发明实现了多个数据库实例的透明化,让客户对多个数据库实例的访问视同为对单个实例的访问。本发明有利于数据库全省集中式部署,同时便于全省统一数据规划、数据模型和数据标准,还能满足现有及未来数据接入需求。
-
公开(公告)号:CN106844555A
公开(公告)日:2017-06-13
申请号:CN201611265625.6
申请日:2016-12-30
Applicant: 江苏瑞中数据股份有限公司
IPC: G06F17/30
CPC classification number: G06F17/30312 , G06F17/30094 , G06F17/30221
Abstract: 本发明公开了一种用于电网WAMS系统的时序数据存储方法,提供测点ID和时序数据结合的存储模型、缓存和文件结合的双层存储架构、按小时独立存储的文件格式以及文件偏移量索引机制;通过缓存与文件结合的双存储架构,并使用测点ID和时序数据结合的存储模型,以及提供的文件偏移量索引,提升高频时序数据的存储效率以及历史数据的查询效率;通过将每个小时的历史数据分文件独立存储,解决历史数据累计后写入和查询效率下降问题。
-
公开(公告)号:CN104991741A
公开(公告)日:2015-10-21
申请号:CN201510355540.6
申请日:2015-06-24
Applicant: 江苏瑞中数据股份有限公司
IPC: G06F3/06
Abstract: 本发明公开了一种基于键值模型的情境适配电网大数据存储方法,以大幅提升实时数据的加载和查询性能,本发明将批量查询和断面查询定义为不同应用情境,根据情境定制不同键。对于具体的数据存储,根据键值进行排序,以提升数据定位的效率;对于值的构成,采用聚簇的思想,在同一个值中存放一批相关联的测点值。本发明方法能够满足不同的应用对于实时数据不同的访问需求,有效提升访问效率,并且节约磁盘空间,大大提升了存取效率。
-
公开(公告)号:CN102890722A
公开(公告)日:2013-01-23
申请号:CN201210413154.4
申请日:2012-10-25
Applicant: 国家电网公司 , 江苏瑞中数据股份有限公司
IPC: G06F17/30
Abstract: 本发明公开了一种应用于时序历史数据库的索引方法,以实现时序历史数据库数据的高效存储和检索。本发明通过以时间点为关键字建立多叉树索引,让索引能够按照时间顺序有序地存放在磁盘上索引文件中,时序历史数据也能够按照时间顺序有序地存放在磁盘上数据文件中。在进行数据访问时,通过批量的内存映射文件机制,减少文件访问的频率,保证时序历史数据库数据存储和检索的效率,并且对内存资源的消耗也较小。
-
公开(公告)号:CN104991741B
公开(公告)日:2018-02-02
申请号:CN201510355540.6
申请日:2015-06-24
Applicant: 江苏瑞中数据股份有限公司
IPC: G06F3/06
Abstract: 本发明公开了一种基于键值模型的情境适配电网大数据存储方法,以大幅提升实时数据的加载和查询性能,本发明将批量查询和断面查询定义为不同应用情境,根据情境定制不同键。对于具体的数据存储,根据键值进行排序,以提升数据定位的效率;对于值的构成,采用聚簇的思想,在同一个值中存放一批相关联的测点值。本发明方法能够满足不同的应用对于实时数据不同的访问需求,有效提升访问效率,并且节约磁盘空间,大大提升了存取效率。
-
-
-
-
-
-
-