-
公开(公告)号:CN106844556A
公开(公告)日:2017-06-13
申请号:CN201611265634.5
申请日:2016-12-30
Applicant: 江苏瑞中数据股份有限公司
Inventor: 王远 , 谢玉波 , 唐胜 , 包建国 , 曹健 , 陈辛明 , 程飞飞 , 何世春 , 孔炜 , 李强 , 秦鹏飞 , 陶霞 , 王乐之 , 王为明 , 韦程 , 张操政 , 张巍
IPC: G06F17/30
CPC classification number: G06F17/30191 , G06F17/30091 , G06F17/30194
Abstract: 本发明公开了一种基于HBase的智能电网时标量测数据存储方法,包括以下步骤:根据量测点的时标和业务模型建立时标量测数据存储模型;采用WAL技术完成对数据记录的加载从而实现将请求加载的数据全部加载到存储模型中;根据量测点规模和数据产生频率,建立数据分区机制,当存储模型中数据量达到分区条件时,实现动态预分区;针对数据规模大、数据产生持续性强的时标量测数据,实现数据高速加载,满足时标量测数据快速加载;采用WAL技术,确保系统异常崩溃时,可通过日志文件快速恢复数据,提升数据加载的可靠性;根据量测点规模和数据产生频率,建立灵活的数据分区机制,确保大量数据分布式访问,提升数据访问性能。