-
公开(公告)号:CN113378023A
公开(公告)日:2021-09-10
申请号:CN202110565938.8
申请日:2021-05-24
Applicant: 华北科技学院(中国煤矿安全技术培训中心)
IPC: G06F16/951 , G06F16/953 , G06F16/335 , G06F16/34 , G06F16/35 , G06F40/194 , G06F40/216 , G06F40/279
Abstract: 本申请提供了一种民生舆情及新闻信息挖掘比对可视化系统。该系统包括:数据采集模块,配置有基于模糊综合评价法构建的网站爬虫池,网站爬虫池配置为爬取新闻网站首页的新闻事件数据,以及爬取民生网站首页的民生事件数据;数据分析模块,配置为基于词频统计方法或者基于预设的文本相似度模型,根据新闻事件数据和民生事件数据,确定热点事件;并调用网站爬虫池,根据热点事件的热点关键词在民生网站中对热点事件的舆情信息进行爬取,得到热点事件的舆情信息;以及,基于预设的情感分析模型,根据热点事件的舆情信息,获取互联网关于热点事件的情感倾向值;可视化模块,配置为根据情感倾向值绘制互联网关于热点事件的情绪变化图。
-
公开(公告)号:CN113297450A
公开(公告)日:2021-08-24
申请号:CN202110565937.3
申请日:2021-05-24
Applicant: 华北科技学院(中国煤矿安全技术培训中心)
IPC: G06F16/951 , G06F16/9535 , G06F16/958 , G06F40/194 , G06N7/02
Abstract: 本申请提供了一种基于模糊综合评价法的爬虫方法、系统、计算机可读介质和电子设备。该爬虫方法包括:基于词向量余弦算法,对构建的多个网站爬虫池之间在预设周期内的相似度进行计算,得到多个所述网站爬虫池之间的相似度;根据访问请求,选择参考网站,并根据所述参考网站对应的所述网站爬虫池与其它所述网站爬虫池之间的相似度,对待爬取网站进行筛选;基于模糊综合评价法,对筛选后的所述待爬取网站对应的所述网站爬虫池的爬取推荐值进行计算,以由所述参考网站对应的所述网站爬虫池,根据筛选后的所述待爬取网站对应的所述网站爬虫池的爬取推荐值,对筛选后的所述待爬取网站进行爬取。
-
公开(公告)号:CN113254746A
公开(公告)日:2021-08-13
申请号:CN202110567772.3
申请日:2021-05-24
Applicant: 华北科技学院(中国煤矿安全技术培训中心)
IPC: G06F16/951 , G06F16/9532 , G06F16/957 , G06F16/958 , G06F40/194 , G06F40/279 , G06Q10/06 , G06N7/02
Abstract: 本申请提供了一种基于树莓派的网络舆情展现系统。该系统包括:树莓派和显示器,树莓派上配置有民生舆情及新闻信息爬取程序,民生舆情及新闻信息爬取程序配置为基于模糊综合评价法构建的网站爬虫池,爬取新闻网站的新闻事件以及民生网站的民生事件,并分别对新闻事件和民生事件的关键词进行统计;显示器与树莓派通讯连接,展示显示器的第一显示区域对新闻事件进行滚动显示,展示显示器的第二显示区域对民生事件进行滚动显示;交互显示器能够分别对新闻事件的关键词、以及民生事件的关键词的统计数据进行展示,由交互对象根据统计数据确定热点关键词并调用树莓派中的民生舆情及新闻信息爬取程序,对热点关键词对应的网络舆情进行爬取并展现。
-
公开(公告)号:CN113254746B
公开(公告)日:2023-07-18
申请号:CN202110567772.3
申请日:2021-05-24
Applicant: 华北科技学院(中国煤矿安全技术培训中心)
IPC: G06F16/951 , G06F16/9532 , G06F16/957 , G06F16/958 , G06F40/194 , G06F40/279 , G06Q10/0635 , G06Q10/0639 , G06N7/02
Abstract: 本申请提供了一种基于树莓派的网络舆情展现系统。该系统包括:树莓派和显示器,树莓派上配置有民生舆情及新闻信息爬取程序,民生舆情及新闻信息爬取程序配置为基于模糊综合评价法构建的网站爬虫池,爬取新闻网站的新闻事件以及民生网站的民生事件,并分别对新闻事件和民生事件的关键词进行统计;显示器与树莓派通讯连接,展示显示器的第一显示区域对新闻事件进行滚动显示,展示显示器的第二显示区域对民生事件进行滚动显示;交互显示器能够分别对新闻事件的关键词、以及民生事件的关键词的统计数据进行展示,由交互对象根据统计数据确定热点关键词并调用树莓派中的民生舆情及新闻信息爬取程序,对热点关键词对应的网络舆情进行爬取并展现。
-
公开(公告)号:CN113378023B
公开(公告)日:2023-05-23
申请号:CN202110565938.8
申请日:2021-05-24
Applicant: 华北科技学院(中国煤矿安全技术培训中心)
IPC: G06F16/951 , G06F16/953 , G06F16/335 , G06F16/34 , G06F16/35 , G06F40/194 , G06F40/216 , G06F40/279
Abstract: 本申请提供了一种民生舆情及新闻信息挖掘比对可视化系统。该系统包括:数据采集模块,配置有基于模糊综合评价法构建的网站爬虫池,网站爬虫池配置为爬取新闻网站首页的新闻事件数据,以及爬取民生网站首页的民生事件数据;数据分析模块,配置为基于词频统计方法或者基于预设的文本相似度模型,根据新闻事件数据和民生事件数据,确定热点事件;并调用网站爬虫池,根据热点事件的热点关键词在民生网站中对热点事件的舆情信息进行爬取,得到热点事件的舆情信息;以及,基于预设的情感分析模型,根据热点事件的舆情信息,获取互联网关于热点事件的情感倾向值;可视化模块,配置为根据情感倾向值绘制互联网关于热点事件的情绪变化图。
-
公开(公告)号:CN113297450B
公开(公告)日:2023-04-14
申请号:CN202110565937.3
申请日:2021-05-24
Applicant: 华北科技学院(中国煤矿安全技术培训中心)
IPC: G06F16/951 , G06F16/9535 , G06F16/958 , G06F40/194 , G06N7/02
Abstract: 本申请提供了一种基于模糊综合评价法的爬虫方法、系统、计算机可读介质和电子设备。该爬虫方法包括:基于词向量余弦算法,对构建的多个网站爬虫池之间在预设周期内的相似度进行计算,得到多个所述网站爬虫池之间的相似度;根据访问请求,选择参考网站,并根据所述参考网站对应的所述网站爬虫池与其它所述网站爬虫池之间的相似度,对待爬取网站进行筛选;基于模糊综合评价法,对筛选后的所述待爬取网站对应的所述网站爬虫池的爬取推荐值进行计算,以由所述参考网站对应的所述网站爬虫池,根据筛选后的所述待爬取网站对应的所述网站爬虫池的爬取推荐值,对筛选后的所述待爬取网站进行爬取。
-
-
-
-
-