-
公开(公告)号:CN111611950B
公开(公告)日:2023-05-19
申请号:CN202010453220.5
申请日:2020-05-26
Applicant: 中国科学院自动化研究所
Abstract: 本发明涉及一种视频精彩片段检测方法及系统,所述检测方法包括:将待测视频均分为多段视频片段;提取各视频片段的特征,得到对应各视频片段的特征表示;根据各特征表示及各视频片段之间关系,确定各视频片段的表示;利用图网络,更新各视频片段的信息;通过二元赋值向量模型,根据各视频片段的信息,确定各视频片段是否是精彩片段。本发明通过将待测视频均分为多段视频片段,并进行特征提取,得到对应的特征表示,确定并更新各视频片段的表示,进而通过二元赋值向量模型,可直接确定各视频片段是否是精彩片段,从而可提高视频片段的检测精度。
-
公开(公告)号:CN111126262B
公开(公告)日:2023-04-28
申请号:CN201911341937.4
申请日:2019-12-24
Applicant: 中国科学院自动化研究所
IPC: G06V20/40 , G06V10/778 , G06V10/82 , G06N3/0464 , G06N3/08
Abstract: 本发明涉及视频信息技术领域,具体涉及一种基于图神经网络的视频精彩片段检测方法和装置。为了解决现有技术对视频精彩片段检测精度低的问题,本发明提出一种方法,包括基于预先获取的待检测视频,通过预设的图像特征提取模型获取待检测视频中每一帧图像的图像特征信息;基于每一帧图像的图像特征信息,构建每一帧图像对应的空间图;根据每一帧图像对应的空间图,通过预设的语义特征提取模型获取每一帧图像中物体的语义特征,并根据每一帧图像中物体的语义特征构建每一帧图像对应的时序图;根据每一帧图像对应的时序图,通过预设的视频片段检测模型获取待检测视频中每一帧图像的用户感兴趣得分。本发明的方法提高了视频精彩片段的检测准确率。
-
公开(公告)号:CN110895561B
公开(公告)日:2022-04-01
申请号:CN201911103544.X
申请日:2019-11-13
Applicant: 中国科学院自动化研究所
IPC: G06F16/332 , G16H80/00
Abstract: 本发明属于信息检索与问答系统领域,具体涉及了一种基于多模态知识感知的医疗问答检索方法、系统、装置,旨在解决现有医疗问答系统无法理解检索词的内涵导致检索准确率低的问题。本发明方法包括:构建多模态医疗知识图谱,获取用户问题对应的备选答案集合;对问题与备选答案进行文本编码,并提取问题与备选答案的实体;通过路径编码获取问题实体到备选答案实体的路径表示;通过医疗问答检索模型获取问题到各备选答案的交互表示;通过多层感知机分别获取问题到各备选答案的匹配分数;最大匹配分数对应的备选答案为检索答案。本发明有效地将知识图谱语义信息应用到医疗问答中,构建问题与答案对之间的交互,提高了检索得到的回答的精确度与准确性。
-
公开(公告)号:CN111611950A
公开(公告)日:2020-09-01
申请号:CN202010453220.5
申请日:2020-05-26
Applicant: 中国科学院自动化研究所
Abstract: 本发明涉及一种视频精彩片段检测方法及系统,所述检测方法包括:将待测视频均分为多段视频片段;提取各视频片段的特征,得到对应各视频片段的特征表示;根据各特征表示及各视频片段之间关系,确定各视频片段的表示;利用图网络,更新各视频片段的信息;通过二元赋值向量模型,根据各视频片段的信息,确定各视频片段是否是精彩片段。本发明通过将待测视频均分为多段视频片段,并进行特征提取,得到对应的特征表示,确定并更新各视频片段的表示,进而通过二元赋值向量模型,可直接确定各视频片段是否是精彩片段,从而可提高视频片段的检测精度。
-
公开(公告)号:CN111126262A
公开(公告)日:2020-05-08
申请号:CN201911341937.4
申请日:2019-12-24
Applicant: 中国科学院自动化研究所
Abstract: 本发明涉及视频信息技术领域,具体涉及一种基于图神经网络的视频精彩片段检测方法和装置。为了解决现有技术对视频精彩片段检测精度低的问题,本发明提出一种方法,包括基于预先获取的待检测视频,通过预设的图像特征提取模型获取待检测视频中每一帧图像的图像特征信息;基于每一帧图像的图像特征信息,构建每一帧图像对应的空间图;根据每一帧图像对应的空间图,通过预设的语义特征提取模型获取每一帧图像中物体的语义特征,并根据每一帧图像中物体的语义特征构建每一帧图像对应的时序图;根据每一帧图像对应的时序图,通过预设的视频片段检测模型获取待检测视频中每一帧图像的用户感兴趣得分。本发明的方法提高了视频精彩片段的检测准确率。
-
公开(公告)号:CN110895561A
公开(公告)日:2020-03-20
申请号:CN201911103544.X
申请日:2019-11-13
Applicant: 中国科学院自动化研究所
IPC: G06F16/332 , G16H80/00
Abstract: 本发明属于信息检索与问答系统领域,具体涉及了一种基于多模态知识感知的医疗问答检索方法、系统、装置,旨在解决现有医疗问答系统无法理解检索词的内涵导致检索准确率低的问题。本发明方法包括:构建多模态医疗知识图谱,获取用户问题对应的备选答案集合;对问题与备选答案进行文本编码,并提取问题与备选答案的实体;通过路径编码获取问题实体到备选答案实体的路径表示;通过医疗问答检索模型获取问题到各备选答案的交互表示;通过多层感知机分别获取问题到各备选答案的匹配分数;最大匹配分数对应的备选答案为检索答案。本发明有效地将知识图谱语义信息应用到医疗问答中,构建问题与答案对之间的交互,提高了检索得到的回答的精确度与准确性。
-
-
-
-
-