一种基于HTTP协议的新闻APP数据采集方法及系统

    公开(公告)号:CN106713059A

    公开(公告)日:2017-05-24

    申请号:CN201510785212.X

    申请日:2015-11-16

    CPC classification number: H04L43/04 H04L67/02

    Abstract: 本发明提供了一种基于HTTP协议的新闻APP数据采集系统,至少包括一移动终端和一Windows机器,其中,所述移动终端与所述Windows机器连接,所述移动终端上安装一新闻APP,所述新闻APP用于访问页面,所述Windows机器用于在所述新闻APP访问页面时监听所述新闻APP所访问的所述页面的所有网络请求,分析监听到所有网络请求的报文以获取请求地址,并模拟所述请求地址访问以获取所述页面的所有网络请求的数据。本发明还提供了对应的方法。实施本发明,利用一Windows机器即可完成该新闻APP数据采集,操作简单,有利于对该新闻APP的网络舆情进行有效监控。同时,通过安装的抓包工具获取所有请求的请求地址,即可通过该请求地址自动快速采集该请求地址的数据。

    一种违规音视频节目取证方法和装置

    公开(公告)号:CN105630462A

    公开(公告)日:2016-06-01

    申请号:CN201410584315.5

    申请日:2014-10-27

    Abstract: 本发明公开了一种违规音视频节目取证方法和装置,用于解决现有的网络音视频监管系统中取证操作依赖于现有的独立的取证工具,功能集成度低,操作繁琐的技术问题。方法包括:S11、在接收到启动指令时,提供取证操作界面;S12、当接收到触发指令时,获取待取证网页的视窗的静态图像并存储于本地的特定文件夹;S13、当接收到触发指令时,录制待取证网页的视窗显示的内容以生成录屏文件并存储于本地的特定文件夹;S14、当接收到触发指令时,获取待取证网页的快照信息并存储于本地的特定文件夹;S15、当接收到触发指令时,下载待取证网页的音视频内容流并存储于本地的特定文件夹。兼容性强,整个操作过程简单易行。

    一种违规音视频节目取证方法和装置

    公开(公告)号:CN105630462B

    公开(公告)日:2018-10-02

    申请号:CN201410584315.5

    申请日:2014-10-27

    Abstract: 本发明公开了一种违规音视频节目取证方法和装置,用于解决现有的网络音视频监管系统中取证操作依赖于现有的独立的取证工具,功能集成度低,操作繁琐的技术问题。方法包括:S11、在接收到启动指令时,提供取证操作界面;S12、当接收到触发指令时,获取待取证网页的视窗的静态图像并存储于本地的特定文件夹;S13、当接收到触发指令时,录制待取证网页的视窗显示的内容以生成录屏文件并存储于本地的特定文件夹;S14、当接收到触发指令时,获取待取证网页的快照信息并存储于本地的特定文件夹;S15、当接收到触发指令时,下载待取证网页的音视频内容流并存储于本地的特定文件夹。兼容性强,整个操作过程简单易行。

    一种面向网页采集任务的插件管理方法及其装置

    公开(公告)号:CN104765592B

    公开(公告)日:2018-09-18

    申请号:CN201410004005.1

    申请日:2014-01-03

    Abstract: 本发明公开了一种面向网页采集任务的插件管理方法及其装置,该方法包括以下步骤:在一网页内选中任意的网页内容,根据所述网页内容生成与所述网页内容对应的抽取规则,同时,根据所述抽取规则生成与所述抽取规则对应的插件;对所述插件进行测试,当所述插件通过测试后,加载所述插件完成网页内容的采集操作,同时,管理所述插件的使用权限,并对所述插件采取相应的维护操作。实施本发明,通过结合Java脚本语言优势,以及现有的版本控制服务器,提高插件的开发效率,实现插件的自动化管理,从而大大降低插件开发和插件维护的成本。同时,在插件开发时,无需重启程序即可以支持插件的动态重复加载,在插件管理时,管理操作更为安全、便捷。

    一种面向网页采集任务的插件管理方法及其装置

    公开(公告)号:CN104765592A

    公开(公告)日:2015-07-08

    申请号:CN201410004005.1

    申请日:2014-01-03

    Abstract: 本发明公开了一种面向网页采集任务的插件管理方法及其装置,该方法包括以下步骤:在一网页内选中任意的网页内容,根据所述网页内容生成与所述网页内容对应的抽取规则,同时,根据所述抽取规则生成与所述抽取规则对应的插件;对所述插件进行测试,当所述插件通过测试后,加载所述插件完成网页内容的采集操作,同时,管理所述插件的使用权限,并对所述插件采取相应的维护操作。实施本发明,通过结合Java脚本语言优势,以及现有的版本控制服务器,提高插件的开发效率,实现插件的自动化管理,从而大大降低插件开发和插件维护的成本。同时,在插件开发时,无需重启程序即可以支持插件的动态重复加载,在插件管理时,管理操作更为安全、便捷。

    一种基于Lucene的相似视频检索方法及系统

    公开(公告)号:CN106708876A

    公开(公告)日:2017-05-24

    申请号:CN201510785287.8

    申请日:2015-11-16

    Abstract: 本发明提供了一种基于Lucene的相似视频检索方法,包括:S1、在一集群的不同的节点分别建立一Lucene视频索引库;S2、获取用于检索相似视频的样本视频,并同时在每一所述Lucene视频索引库中进行检索,分别得到与所述样本视频相似的结果视频;S3、收集各个节点的结果视频,按照相似系数进行排列形成一结果视频集合,并输出该结果视频集合。本发明还提供了对应的系统。实施本发明,在检索时,每一节点同时进行检索,提高检索速度,保证了检索质量。同时,通过Lucene作为检索引擎,使用余弦相似算法计算视频相似度,加快比对速度,同时通过预先建立Lucene视频索引库,减少视频检索过程中的预处理时间,并对提取的视频帧进行压缩,减少帧比对的计算量,进一步加快比对速度。

    一种基于Lucene的相似视频检索方法及系统

    公开(公告)号:CN106708876B

    公开(公告)日:2020-04-21

    申请号:CN201510785287.8

    申请日:2015-11-16

    Abstract: 本发明提供了一种基于Lucene的相似视频检索方法,包括:S1、在一集群的不同的节点分别建立一Lucene视频索引库;S2、获取用于检索相似视频的样本视频,并同时在每一所述Lucene视频索引库中进行检索,分别得到与所述样本视频相似的结果视频;S3、收集各个节点的结果视频,按照相似系数进行排列形成一结果视频集合,并输出该结果视频集合。本发明还提供了对应的系统。实施本发明,在检索时,每一节点同时进行检索,提高检索速度,保证了检索质量。同时,通过Lucene作为检索引擎,使用余弦相似算法计算视频相似度,加快比对速度,同时通过预先建立Lucene视频索引库,减少视频检索过程中的预处理时间,并对提取的视频帧进行压缩,减少帧比对的计算量,进一步加快比对速度。

Patent Agency Ranking