大数据管理方法及大数据管理平台

    公开(公告)号:CN116881340A

    公开(公告)日:2023-10-13

    申请号:CN202310658816.2

    申请日:2023-06-05

    Abstract: 本申请公开了一种大数据管理方法及一种大数据管理平台,该方法包括获取多个通信基础数据;依次确定每个所述通信基础数据是否符合预设的数据标准;将不符合所述数据标准的通信基础数据确定为目标基础数据;判断所述目标基础数据是否属于修订数据,若所述目标基础数据属于修订数据,则对所述目标基础数据进行修订,使经过修订的所述目标基础数据符合所述数据标准,如此,确定经过修改后,可以符合数据标准的数据,并对该数据进行修订使其符合数据标准,随后实现存储符合统一数据标准的通信基础数据,进一步提高管理通信基础数据的简易度,从而,提高通信基础数据的完整性以及准确性。

    数据流量采集灾备处理方法、装置、设备、系统及介质

    公开(公告)号:CN115065589A

    公开(公告)日:2022-09-16

    申请号:CN202210631614.4

    申请日:2022-06-06

    Abstract: 本申请公开了一种数据流量采集灾备处理方法、装置、设备、系统及介质,本申请提供灾备处理方法通过在数据采集系统中设置灾备处理设备,对采集设备进行实时监测,当采集设备发生故障时及时启动切换程序,使用备用采集设备处理院故障设备的流量,在不提高建设成本及运维复杂度的情况下,提高了数据采集系统的完整性,由于主机的工作状态由灾备处理设备实时监测,无需人工干预,故障时自动启动切换,采集工作可以在几秒内可以完成,能够大幅度降低了故障时数据丢失量,解决了现有的冷备用方案的切换需要人工发现及干预,采集工作恢复时间一般在数分钟甚至数小时,容易导致大量数据不可恢复性的缺失的技术问题。

    一种利用手机信令数据进行宏观经济分析的数据处理系统

    公开(公告)号:CN115510056B

    公开(公告)日:2023-10-13

    申请号:CN202211033894.5

    申请日:2022-08-26

    Abstract: 本发明提出了一种利用手机信令数据进行宏观经济分析的数据处理系统,其特征在于,包括:数据预处理平台、数据深加工平台和指数生成平台,其中,所述数据预处理平台用于对原始数据进行预处理,包括:去标识化、缺失值填补、轨迹补齐、基站网格化和GIS信息映射,生成原始表;所述数据深加工平台用于根据所述原始表统计不同空间层级的人群聚集特征,统计不同空间层级的点对点人群流动特征;以及用于基于轨迹构建移动模式分类数据库,构建人群居住、工作与休闲模式OD数据库,生成中间表;所述指数生成平台用于根据所述中间表构建三大细分指数,对所述三大细分指数进行加权,构建经济动力总指数,生成指数表。

    大数据平台全流程数据加密保护方法

    公开(公告)号:CN114793169A

    公开(公告)日:2022-07-26

    申请号:CN202210276423.0

    申请日:2022-03-21

    Abstract: 本发明提出了一种大数据平台全流程数据加密保护方法及系统,包括:加密操作:大数据组件触发加密需求,向加解密算法模块调用加密引擎;加解密算法模块向密钥管理系统获取密钥,由密钥管理系统进行身份认证和鉴权;密钥管理系统如果请求成功,则返回密钥;否则请求失败;加解密算法模块进行加密运算,然后向大数据组件返回加密结果;解密操作:大数据组件触发解密请求,向加解密算法模块调用解密引擎;加解密算法模块向密钥管理系统获取密钥,由密钥管理系统进行身份认证和鉴权;密钥管理系统如果请求成功,则返回密钥;否则请求失败;加解密算法模块进行解密运算,然后向大数据组件返回解密结果。

    一种基于手机通信数据的号码伴随辅助识别方法

    公开(公告)号:CN117177185A

    公开(公告)日:2023-12-05

    申请号:CN202311443576.0

    申请日:2023-11-02

    Abstract: 本发明提出了一种基于手机通信数据的号码伴随辅助识别方法,方法包括通信数据预处理、时空轨迹数据入库、时空网格快速伴随和号码精确伴随,通信数据预处理包括轨迹去噪;时空轨迹数据入库主要是对号码及时空网格建立索引,并将号码和时空网格的索引及其对应的时空轨迹数据存储到时空在线库中;时空网格快速伴随包括时空搜索、时空扩域、时空耦合和时空碰撞;号码精确伴随包括构建邻基站模型和多维度特征相似度计算。本发明解决了现有技术中存在的对基础数据的时间和空间连续性要求高、算法时间复杂度高、伴随效果差和伴随精度低的问题,从而使得具有重要应用价值的伴随关系可以有效的应用于现实场景中。

Patent Agency Ranking