公开(公告)号：CN103888304B

公开(公告)日：2017-08-04

申请号：CN201210554617.9

申请日：2012-12-19

Applicant: 华为技术有限公司 ,  中国科学院计算技术研究所

Inventor： 高婉铃 ,  陆钢 ,  王磊 ,  左啸冰

IPC: H04L12/26

Abstract: 本发明实施例公开了一种多节点应用的异常检测方法及相关装置，用于及时发现应用间的相互干扰，检测多节点应用的异常行为。本发明实施例包括采集多节点应用运行时产生的数据；根据采集到的数据，构建应用交互拓扑图，应用交互拓扑图包括节点特征向量和边特征向量；判断应用交互拓扑图与预置的应用交互拓扑图是否同构；若应用交互拓扑图与预置的应用交互拓扑图不同构，则确定出多节点应用运行时存在异常。

公开(公告)号：CN106202077A

公开(公告)日：2016-12-07

申请号：CN201510217232.7

申请日：2015-04-30

Applicant: 华为技术有限公司 ,  中国科学院计算技术研究所

Inventor： 左啸冰 ,  罗纯杰

IPC: G06F17/30

Abstract: 本发明实施例公开了一种任务分发方法及装置，用于提高网络爬虫的爬取效率。本发明实施例方法包括：将第一页面的统一资源定位符URL和所述第一页面的URL的父页面的哈希hash值解析到任务列表中；判断所述第一页面的URL是否已被爬取；当所述第一页面的URL未被爬取时，根据所述第一页面的URL中的子域名和所述第一页面的URL的父页面的哈希hash值确定所述第一页面与第二页面是否为相邻页面；当确定所述第一页面与所述第二页面不为相邻页面时，将所述第一页面分配到新线程中；当确定所述第一页面与所述第二页面为相邻页面时，将所述第一页面分配到所述第二页面所在的线程中；按时序控制对分配后的线程执行下载任务。

公开(公告)号：CN103888304A

公开(公告)日：2014-06-25

申请号：CN201210554617.9

申请日：2012-12-19

Applicant: 华为技术有限公司 ,  中国科学院计算技术研究所

Inventor： 高婉铃 ,  陆钢 ,  王磊 ,  左啸冰

IPC: H04L12/26

Abstract: 本发明实施例公开了一种多节点应用的异常检测方法及相关装置，用于及时发现应用间的相互干扰，检测多节点应用的异常行为。本发明实施例包括采集多节点应用运行时产生的数据；根据采集到的数据，构建应用交互拓扑图，应用交互拓扑图包括节点特征向量和边特征向量；判断应用交互拓扑图与预置的应用交互拓扑图是否同构；若应用交互拓扑图与预置的应用交互拓扑图不同构，则确定出多节点应用运行时存在异常。

公开(公告)号：CN106202077B

公开(公告)日：2020-01-21

申请号：CN201510217232.7

申请日：2015-04-30

Applicant: 华为技术有限公司 ,  中国科学院计算技术研究所

Inventor： 左啸冰 ,  罗纯杰

IPC: G06F16/955 ,  G06F16/951

Abstract: 本发明实施例公开了一种任务分发方法及装置，用于提高网络爬虫的爬取效率。本发明实施例方法包括：将第一页面的统一资源定位符URL和所述第一页面的URL的父页面的哈希hash值解析到任务列表中；判断所述第一页面的URL是否已被爬取；当所述第一页面的URL未被爬取时，根据所述第一页面的URL中的子域名和所述第一页面的URL的父页面的哈希hash值确定所述第一页面与第二页面是否为相邻页面；当确定所述第一页面与所述第二页面不为相邻页面时，将所述第一页面分配到新线程中；当确定所述第一页面与所述第二页面为相邻页面时，将所述第一页面分配到所述第二页面所在的线程中；按时序控制对分配后的线程执行下载任务。