公开(公告)号：CN118277684A

公开(公告)日：2024-07-02

申请号：CN202410140964.X

申请日：2024-02-01

Applicant: 复旦大学

Inventor： 李梓涵 ,  顾洲洪 ,  熊卓帜 ,  蒋思航 ,  朱晓萱 ,  冯红伟 ,  肖仰华

IPC: G06F16/955 ,  G06F16/36 ,  G06F16/74 ,  H04N21/845

Abstract: 本发明提供的一种基于层次注意力机制的工业视频链接方法，用于将工业视频与现有工业知识图谱进行知识概念迭代链接，本发明基于工业视频的语音识别文本和图像文本利用层次注意力机制计算和融合相似度，获取相似度的最高得分作为计算结果，通过迭代链接到工业知识图谱的知识概念中去，充分利用工业视频的图像文本和语音识别文本，通过图像文本所包含的文字信息可以极大帮助预训练语言模型学习和理解相关知识，减少迭代链接中的误差传递。

公开(公告)号：CN117956236A

公开(公告)日：2024-04-30

申请号：CN202410062442.2

申请日：2024-01-16

Applicant: 复旦大学

Inventor： 朱晓萱 ,  张琳 ,  李梓涵 ,  顾洲洪 ,  熊卓帜 ,  冯红伟 ,  肖仰华

IPC: H04N21/475 ,  H04N21/234 ,  H04N21/24 ,  H04N21/44 ,  G06T7/00 ,  G06Q50/04

Abstract: 本发明提供了一种面向制造业视频内容质量的自动评估方法及系统，其中方法包括如下步骤：步骤S1，使用视频文本对语言模型进行预训练工作，步骤S2，对经过视频内容预训练的语言模型的单选题QA能力进行初始化微调，步骤S3，对单选能力初始化后的语言模型在视频相关专业题目上进行继续微调，步骤S4，得到视频内容及单选能力增强的语言模型的答题准确率；步骤S5，根据答题准确率对视频的内容质量进行评估。本发明创新性地使用大规模预训练语言模型和单选题QA实现制造业视频内容质量的自动化评估，同时用视频文本和参考文档分别生成训练单选题和测试单选题，确保语言模型能够充分学习视频中的知识，并以参考文档为标准对视频的内容质量进行准确评估。

公开(公告)号：CN117874257A

公开(公告)日：2024-04-12

申请号：CN202410062445.6

申请日：2024-01-16

Applicant: 复旦大学

Inventor： 张琳 ,  李梓涵 ,  顾洲洪 ,  熊卓帜 ,  蒋思航 ,  冯红伟 ,  肖仰华

IPC: G06F16/36 ,  G06F16/332 ,  G06Q50/04 ,  G06N3/045 ,  G06F40/151 ,  G06F40/216 ,  G06F40/186

Abstract: 本发明提供了一种对制造业知识图谱价值的评估方法及系统，其中方法包括如下步骤：步骤1，基于下游应用提供的信息，将语料库中的文本进行排序，步骤2，通过知识图谱生成问题集，并由文本进行回答，得到每个句子回答问题集的分数；步骤3，基于步骤1和步骤2的计算结果，得到知识图谱对于下游应用的价值评估得分。本发明提出一种基于语料库的制造业知识图谱价值的评估方法及系统，将价值评价、问题发现和价值提升融入到一个框架中，而且更加符合制造业下游应用的实际需求，具有高度可解释性和可重用性，且做到低成本和高效。