-
公开(公告)号:CN107885489B
公开(公告)日:2021-05-04
申请号:CN201711008066.5
申请日:2017-10-25
Applicant: 中国信息通信研究院
Abstract: 本发明公开了一种快速检测实名登记数据指标的方法,所述方法包括以下步骤:初始化参数和创建线程池;创建实名登记数据磁盘文件的内存映射文件;从所述内存映射文件读取实名登记数据,然后对所述实名登记数据进行初步数据检测分析,将检测未通过的数据分类输出,并把检测通过的数据按照特征字段为索引建立Map集合内存数据库;将所述Map集合内存数据库中的所述检测通过的数据划分区块,并为每一个线程分配任务;以及对每一个所述区块的数据进行并发数据检测分析,并将结果进行分类输出。本发明的方法能够在海量数据环境中高效、客观地检测实名登记数据的相关指标。
-
公开(公告)号:CN107885489A
公开(公告)日:2018-04-06
申请号:CN201711008066.5
申请日:2017-10-25
Applicant: 中国信息通信研究院
CPC classification number: G06F8/22 , G06F8/315 , G06F9/5016 , G06F17/30289 , G06F2209/5018 , G06Q50/30
Abstract: 本发明公开了一种快速检测实名登记数据指标的方法,所述方法包括以下步骤:初始化参数和创建线程池;创建实名登记数据磁盘文件的内存映射文件;从所述内存映射文件读取实名登记数据,然后对所述实名登记数据进行初步数据检测分析,将检测未通过的数据分类输出,并把检测通过的数据按照特征字段为索引建立Map集合内存数据库;将所述Map集合内存数据库中的所述检测通过的数据划分区块,并为每一个线程分配任务;以及对每一个所述区块的数据进行并发数据检测分析,并将结果进行分类输出。本发明的方法能够在海量数据环境中高效、客观地检测实名登记数据的相关指标。
-