海量结构化数据复杂查询任务的分布式查询方法和系统

    公开(公告)号:CN102521406B

    公开(公告)日:2014-06-25

    申请号:CN201110442091.0

    申请日:2011-12-26

    Abstract: 本发明提供一种海量结构化数据复杂查询任务的分布式查询方法和系统。其中海量结构化数据的分布式查询方法包括:接收用户发出的查询任务并将查询任务分解为多个查询子任务;以及根据该多个查询子任务中的每个查询子任务,对分布式存储的数据并发执行分批次查询,并分布式返回查询到的结果集。本发明采用的分批次查询并保持中间结果状态的查询方法,充分考虑了界面展示应用中小数据量快速查询的需求,同时也兼顾了统计、分析背景下的大结果集的统计需求。

    一种应用层分布式拒绝服务攻击过滤方法及系统

    公开(公告)号:CN102075535B

    公开(公告)日:2013-01-30

    申请号:CN201110005704.4

    申请日:2011-01-12

    Abstract: 本发明提供一种应用层分布式拒绝服务(DDoS)攻击过滤方法和系统,该方法包括下列步骤:100)接收服务请求;200)根据所请求对象所属页面的内嵌对象数和思考时间判断所述服务请求是否为DDoS攻击,其中,所请求对象所属页面的内嵌对象数<页面最大内嵌对象数且思考时间<最小思考时间的请求不是攻击,思考时间是(判断的当前时间-页面到达时间)。本发明在能够有效过滤DDoS攻击的同时,还兼具如下优点:(1)计算复杂性低,简便快捷;(2)能够独立于服务器运行;(3)不对用户造成任何干扰。

    支持高速加载的海量结构化数据存储、查询方法和系统

    公开(公告)号:CN102521405A

    公开(公告)日:2012-06-27

    申请号:CN201110441775.9

    申请日:2011-12-26

    Abstract: 本发明提供一种支持高速加载的海量结构化数据存储、查询方法和系统。其中海量结构化数据的分布式存储方法包括:从用户端接收高速加载的数据;以及利用双滑动窗口结构,将加载的数据进行分布式缓存,并在固定周期之后将缓存的数据进行分布式存储。通过本发明的海量结构化数据分布式存储方法,能够实现对新加载数据的缓存,从而在后期查询数据时能够提高流数据这种对近期加载数据使用频率高的应用下的查询效率。

    一种电视台标训练方法和识别方法

    公开(公告)号:CN101739561B

    公开(公告)日:2012-06-13

    申请号:CN200810226266.2

    申请日:2008-11-11

    Abstract: 本发明提供一种电视台标训练方法和识别方法,该电视台标训练方法包括:1)根据帧差法确定训练视频中台标的外接矩形;2)对所述台标的外接矩形进行边缘检测,得到台标的边缘点;3)根据所述台标的边缘点,计算台标的距离变换矩阵Df。根据该电视台标训练方法得到的特征,在识别过程中不需要通过连续的多帧视频信息来确定台标在视频中的位置,只需要待检测视频的单帧视频信息;且在台标形状和大小有微小变化的情况下,仍能成功识别。

    网络异常性指数定量计算方法和系统

    公开(公告)号:CN101808017B

    公开(公告)日:2012-04-18

    申请号:CN201010135667.4

    申请日:2010-03-26

    Abstract: 本发明提供一种网络异常性指数定量计算方法,包括:在待监测网络中选择一定数量的路由器节点作为数据的采集点,并设置用于采集数据的基期和报告期;在各个数据采集点上做数据采集,得到包含有源IP地址、目的IP地址、源端口、目的端口、协议类型、流开始时间、流结束时间、包数、字节数、TCP标记在内的相关信息;统计和计算所采集的数据,得到关于待监测网络中网络数据流量、协议成分、IP与端口分布以及行为模式的指标;将当前时刻计算得到的指标与基期内计算的相应指标相结合,计算用于表示待监测网络异常程度的网络异常性指数。本发明能够及时有效地反映典型网络安全事件对网络安全态势产生的影响。

    网络安全协同联动系统及方法

    公开(公告)号:CN102377780A

    公开(公告)日:2012-03-14

    申请号:CN201110315576.3

    申请日:2011-10-18

    Abstract: 本发明提供一种网络安全协同联动系统。其中安全资源接口模块为多个安全资源提供传输接口以便在所述协同联动系统与各个安全资源之间进行文件传输的;安全资源适配模块将相应的安全资源提供的安全事件信息从其特定格式转换为所述协同联动系统的标准格式;协同联动引擎模块根据协同联动需求对各个安全资源提供的安全事件进行关联分析和挖掘,以得到更有价值的信息。该系统具备对遵循通过协商所定接口的网络安全资源的协同分析和联动控制能力,具有更好的通用性;不同的网络安全资源可通过相应专用的安全适配模块快速方便地加入到协同联动系统中,具有更好的可扩展性。

    一种异常流的检测方法及系统

    公开(公告)号:CN101316268B

    公开(公告)日:2011-12-14

    申请号:CN200810116178.7

    申请日:2008-07-04

    Inventor: 戴磊 云晓春 肖军

    Abstract: 本发明公开了一种异常流的检测方法及系统。该方法包括:捕获网络中的IP分组,采集其中满足预设条件的SYN分组,并提取所述SYN分组的地址信息作为数据项,组成数据项集合;挖掘所述数据项集合中预设时间内频繁出现的数据项作为频繁项,记录所述频繁项所对应的地址信息,并根据该频繁项定位行为异常的流;还包括:对所述频繁项进行熵值计算,为网络异常情况的评估提供依据。其能够在只使用少量计算存储资源的前提下,快速识别网络中试图频繁建立连接的流,可以帮助实现异常流的按需监控,减轻网络监控负担。

    网络失窃密行为的异常检测方法及系统

    公开(公告)号:CN101635658B

    公开(公告)日:2011-08-17

    申请号:CN200910091605.5

    申请日:2009-08-26

    Abstract: 本发明提供一种网络失窃密行为的异常检测方法,包括:接收网络数据包,并对所得到的网络数据包做协议还原;将所述网络数据包与关注目标做相关性判断,抛弃不具有相关性的网络数据包,对具有相关性的网络数据包执行下一步;判定与所述关注目标相关的网络数据包所属的连接;其中,所述连接包括TCP连接或UDP连接;对与所述关注目标相关的所有连接上的检测特征向量进行统计;根据统计结果,计算与所述关注目标相关的连接所对应的检测特征向量中各个检测特征的值;根据所述检测特征的值判断对应连接是否存在异常。本发明不需要分析和提取固定特征,能够及时地发现未知网络失窃密行为;不需要处理网络数据包的数据负载,提高了检测效率,适合于大规模网络环境的应用部署。

    一种支持ANSI编码的中文文本的压缩方法

    公开(公告)号:CN101350624B

    公开(公告)日:2011-05-04

    申请号:CN200810119940.7

    申请日:2008-09-11

    Abstract: 本发明提供一种支持ANSI编码的中文文本的压缩方法以及相应的解压缩方法,该压缩方法包括下列步骤:根据待压缩中文文本中的字符在字符码表中的位置,将所述待压缩中文文本中的字符分别用1个或多个字节编码,且在生成的码字中标识所述字节个数,其中,所述字符码表包括根据所述待压缩中文文本中的字符的出现频率的降序所排列的字符;将生成的码字写入压缩文件。本发明最大限度地保持了中文数据流的语义特征,并且能与各种压缩算法、压缩软件配合使用。

Patent Agency Ranking