用于移动互联网海量监测数据的分级分类处理方法及系统

    公开(公告)号:CN110110081B

    公开(公告)日:2021-05-11

    申请号:CN201910279309.1

    申请日:2019-04-09

    Abstract: 本发明公开了一种用于移动互联网海量监测数据的分级分类处理方法,包括以下步骤:接收并解析监测日志数据,获取监测日志数据的协议类型;根据监测日志数据的协议类型,确定监测日志数据的存储级别;根据监测日志数据的存储级别,对监测日志数据进行存储本发明提供的将移动互联网海量数据按需分级分类监测的方法,可以根据业务需求动态配置数据分级分类存储的策略,并在海量日志数据向后端存储系统发送时加入分级存储的标签;通过对日志的分级、分类存储在能够满足业务需求的情况下减少对存储空间的使用,提升系统存储效率。

    一种基于规则配置的URL搜索关键词提取的方法及系统

    公开(公告)号:CN105631050A

    公开(公告)日:2016-06-01

    申请号:CN201610111430.X

    申请日:2016-03-01

    Abstract: 本发明公开了一种基于规则配置的URL搜索关键词提取的方法,包括生成规则:对需要支持的搜索引擎的搜索URL进行分析,提取搜索URL特征并生成规则;配置规则:配置上述步骤分析到的规则;URL过滤:接收第三方的URL数据并与配置的所述规则进行匹配来过滤收到的所有URL数据;关键词处理:当有第三方的URL命中所述规则,则提取该URL的搜索关键词。本发明可以通过配置规则来快速的实现对多种搜索引擎的搜索URL关键字进行提取,实现海量URL数据的快速处理,从而在信安系统或舆情系统中使用本发明可以提供强有力的支撑。

    一种用于移动物联网智能终端的数据监测方法及系统

    公开(公告)号:CN110121175A

    公开(公告)日:2019-08-13

    申请号:CN201910297008.1

    申请日:2019-04-12

    Abstract: 本发明公开了一种用于移动物联网智能终端的数据监测方法,包括以下步骤:根据所述智能终端的平均数据量、数据访问方向以及设备识别特征码生成数据特征码;根据所述数据特征码,查询历史数据特征码表,判定所述智能终端的类别。本发明基于指纹提取、IP标定和A记录等数据,采用多维度的复合信息对移动智能终端设备进行分类,覆盖设备范围更加全面,采集到的物联网和智能终端类型更加丰富;可识别多种业务协议和设备,支持动态增加物联网协议和设备质问,可扩展性更好;多种标注手段相结合,具有较高的纠错率和鲁棒性。

    用于移动互联网海量监测数据的分级分类处理方法及系统

    公开(公告)号:CN110110081A

    公开(公告)日:2019-08-09

    申请号:CN201910279309.1

    申请日:2019-04-09

    Abstract: 本发明公开了一种用于移动互联网海量监测数据的分级分类处理方法,包括以下步骤:接收并解析监测日志数据,获取监测日志数据的协议类型;根据监测日志数据的协议类型,确定监测日志数据的存储级别;根据监测日志数据的存储级别,对监测日志数据进行存储本发明提供的将移动互联网海量数据按需分级分类监测的方法,可以根据业务需求动态配置数据分级分类存储的策略,并在海量日志数据向后端存储系统发送时加入分级存储的标签;通过对日志的分级、分类存储在能够满足业务需求的情况下减少对存储空间的使用,提升系统存储效率。

    用于URL分析系统的文件扩展名快速匹配方法和装置

    公开(公告)号:CN108549679A

    公开(公告)日:2018-09-18

    申请号:CN201810288551.0

    申请日:2018-04-03

    Abstract: 本发明公开了一种用于URL分析系统的文件扩展名快速匹配方法和装置。所述方法包括:根据用户的业务需求,接收所需过滤URL的文件扩展名信息;利用接收到的所需过滤URL的文件扩展名信息,构建快速匹配算法环境;利用构建的快速匹配算法环境,对待检测URL的文件扩展名进行匹配,过滤掉不符合用户业务需求的URL。本发明基于用户的业务需求构建的快速匹配算法环境,该快速匹配算法环境使用字节来标记字符,并利用父节点储存位置和父节点中字符的索引值来直接定位子节点中字符的储存位置,而不使用常规的指针索引子节点,节省存储空间并提升匹配效率,尤其适用于处理海量URL数据,数据处理效率高。

Patent Agency Ranking