一种用于多段视频跨模态检索的方法

    公开(公告)号:CN110175266B

    公开(公告)日:2020-10-30

    申请号:CN201910453196.2

    申请日:2019-05-28

    Applicant: 复旦大学

    Inventor: 姜育刚 王铮

    Abstract: 本发明属于计算机视频分析技术领域,具体为一种用于多段视频跨模态检索的方法。本发明针对长文本跨模态检索多段视频任务,基于预检索与排序的思路提出了相关视频片段预选取方法和多段无序视频语义排序网络架构,并设计了双边自注意力方法提取视频中与检索文本相关的特征。本方法首先使用带有自注意力机制的跨模态检模型初选出一小部分相关的视频片段,再根据同模态和跨模态相似度进一步精选视频片段,最后用语义排序网络将视频片段序列与文本句子序列对齐。本发明方法具有鲁棒性高,速度快等优点,设计的多文本多视频片段语义对齐方法,不仅适用于等长序列的对齐问题,也适用于非等长序列的对齐问题。

    贯众在制备防治系统性红斑狼疮药物中的用途

    公开(公告)号:CN101474214A

    公开(公告)日:2009-07-08

    申请号:CN200910045493.X

    申请日:2009-01-16

    Applicant: 复旦大学

    Abstract: 本发明属中药领域,涉及贯众总多糖在制备防治系统性红斑狼疮药物中的用途。本发明从中药贯众中分离提取得到总多糖提取物,平均产物收率5.72%,多糖含量超过50%。所述总多糖经整体动物模型试验结果显示,对系统性红斑狼疮样综合征小鼠的自身免疫反应亢进和肾损伤有明显的保护作用,实验证实,所述贯众总多糖对系统性红斑狼疮样综合征有防治作用。可制备防治系统性红斑狼疮药物和防治自身免疫性疾病等药物。

    一种用于多段视频跨模态检索的方法

    公开(公告)号:CN110175266A

    公开(公告)日:2019-08-27

    申请号:CN201910453196.2

    申请日:2019-05-28

    Applicant: 复旦大学

    Inventor: 姜育刚 王铮

    Abstract: 本发明属于计算机视频分析技术领域,具体为一种用于多段视频跨模态检索的方法。本发明针对长文本跨模态检索多段视频任务,基于预检索与排序的思路提出了相关视频片段预选取方法和多段无序视频语义排序网络架构,并设计了双边自注意力方法提取视频中与检索文本相关的特征。本方法首先使用带有自注意力机制的跨模态检模型初选出一小部分相关的视频片段,再根据同模态和跨模态相似度进一步精选视频片段,最后用语义排序网络将视频片段序列与文本句子序列对齐。本发明方法具有鲁棒性高,速度快等优点,设计的多文本多视频片段语义对齐方法,不仅适用于等长序列的对齐问题,也适用于非等长序列的对齐问题。

Patent Agency Ranking