-
公开(公告)号:CN108334628A
公开(公告)日:2018-07-27
申请号:CN201810155131.5
申请日:2018-02-23
Applicant: 北京东润环能科技股份有限公司 , 北京绿色东方数据技术有限公司
Abstract: 本发明实施例公开了一种新闻事件聚类的方法、装置、设备和储存介质。所述方法,包括:抓取预设网站中的新闻文本;对新闻文本进行分词、词性标注和命名实体识别,得到对应的文本分词;比较两个新闻文本对应的文本分词中预设类型文本分词的分词相似度,赋予对应的分词相似度权重;比较两个新闻文本的文本内容相似度,赋予对应的文本内容相似度权重;根据两个新闻文本的分词相似度、分词相似度权重、文本内容相似度和文本内容相似度权重,确定两个新闻文本的相似度;当两个新闻文本的相似度大于相似度阈值,确定两个新闻文本为相似新闻事件。本发明实施例的技术方案,实现鉴别相同新闻事件,节约用户浏览新闻的时间。