-
公开(公告)号:CN114022475B
公开(公告)日:2024-08-02
申请号:CN202111397389.4
申请日:2021-11-23
Applicant: 上海交通大学
IPC: G06T7/00 , G06V10/44 , G06V10/764 , G06V10/77 , G06V10/774 , G06V10/82 , G06N3/0464 , G06N3/0895
Abstract: 本发明提供了一种基于自监督掩膜的图像异常检测和异常定位方法及系统,涉及计算机视觉和图像处理技术领域,该方法包括:掩膜随机生成步骤、掩膜初始化步骤、生成初始化掩膜、图像特征提取步骤、图像重建步骤、重建图像对齐步骤、掩膜更新步骤、掩膜更新终止决策步骤以及异常评定步骤。本发明通过引入自监督掩膜的训练,提高了异常检测算法的异常定位能力,从而在异常检测和异常定位任务上取得较好的性能。
-
公开(公告)号:CN117422149A
公开(公告)日:2024-01-19
申请号:CN202311225428.1
申请日:2023-09-21
Applicant: 上海人工智能创新中心 , 上海交通大学
IPC: G06N20/00
Abstract: 本发明涉及一种基于梯度修正和元学习的联邦学习方法、系统及存储介质,该方法包括:本地终端的模型训练过程,采用元学习框架来统一本地模型性能最大化和特征分布一致性的优化目标,所述元学习框架包括元训练阶段和元更新阶段,其中在元训练阶段仅关注本地模型向本地数据分布拟合,在元更新阶段同时进行本地数据分布拟合和特征空间一致性约束;服务器端的全局聚合过程,采用基于梯度修正的参数聚合技术,通过计算不同终端节点贡献的梯度向量之间的一致性,动态调整各梯度向量的贡献权重值,并使用更新后的权重值聚合得到新的全局模型。与现有技术相比,本发明具有实现了全局模型的强泛化性和本地模型的高性能兼顾等优点。
-
公开(公告)号:CN119132496A
公开(公告)日:2024-12-13
申请号:CN202411259627.9
申请日:2024-09-09
Applicant: 上海交通大学医学院附属瑞金医院
Abstract: 本申请公开了一种基于思维链的医学影像报告结构化处理方法及相关装置,涉及人工智能技术领域,包括:确定至少一条思维链,思维链包括多个具有层级关系的节点,多个节点的指令提示范围逐级递减,针对至少一条思维链,通过将待处理的医学影像报告文本、上一节点的结构化输出和当前节点的指令提示输入预训练的大语言模型,使大语言模型按照思维链的层级逻辑依次对医学影像报告文本进行准确、规范、完整的结构化数据提取,避免数据抽取过程中的错误和遗漏,保证了所提取到的结构化数据的准确性、规范性和完整性,且整个过程全部自动化完成,不需要人工参与,提高了医学影像报告结构化处理效率。
-
公开(公告)号:CN117540339A
公开(公告)日:2024-02-09
申请号:CN202311580387.8
申请日:2023-11-24
Applicant: 上海交通大学医学院附属瑞金医院
IPC: G06F18/25 , G16H50/20 , G16H50/70 , G06N3/0455
Abstract: 本发明公开面向多模态医学数据的掩码式预训练方法和系统,本系统包括文本结构化模块,文本掩码模块,图像掩码模块,图像编码器,文本编码器,多模态融合模块,图像解码器,文本编码器,图像重建损失模块,文本重建损失模块。采用本系统可以在预训练阶段实现医学影像和报告文本中征象和部位的深度对应关系,同时加强模型根据图像理解和推断文本,以及根据文本理解并推断图像的能力,方便下游任务中影像和报告文本之间的灵活转换,克服了现有技术存在的影像和报告文本匹配不完全、部位和征象对应不清晰的问题。
-
公开(公告)号:CN119132498A
公开(公告)日:2024-12-13
申请号:CN202411260853.9
申请日:2024-09-09
Applicant: 上海交通大学医学院附属瑞金医院
IPC: G16H15/00 , G06F16/35 , G06F16/36 , G06F40/295 , G06N5/022
Abstract: 本申请提供了一种知识驱动的医学影像报告的结构化处理方法及装置,该方法基于医学知识、大语言模型或规则匹配、人工校验等多种方式相结合构建得到的影像知识库,其包含完善的医学影像知识。进一步基于该影像知识库中的医学知识识别出的影像报告中的医学实体的准确性更高。针对同一分句中存在级联关系的医学实体进行层级合实现结构化信息的规划化输出。最后,针对影像报告中所有分句的医学实体信息,去除不同分句间存在的重复冗余的实体信息,得到影像报告对应的结构化信息,进一步提高了影像报告中结构化信息的准确性。
-
公开(公告)号:CN119132497A
公开(公告)日:2024-12-13
申请号:CN202411260852.4
申请日:2024-09-09
Applicant: 上海交通大学医学院附属瑞金医院
IPC: G16H15/00 , G16H50/70 , G06F40/284 , G06F40/295 , G06F40/211 , G06F16/35 , G06N3/045 , G06N5/022
Abstract: 本申请公开了一种医学影像报告结构化方法及相关装置,涉及自然语言处理技术领域,医学影像报告结构化方法包括:获取目标医学影像报告;基于预先获得的医学影像报告结构化模型,对目标医学影像报告进行结构化处理,得到目标医学影像报告的结构化信息,其中,医学影像报告结构化模型采用训练数据对预训练后的大语言模型进行指令微调得到,训练数据至少包括标注有结构化信息的第一训练医学影像报告。本申请公开的医学影像报告结构化方法为基于大语言模型的端到端的结构化方法,该方法能准确、高效、规范的提取出医学影像报告中蕴含的关键信息,且该方法实现过程简单、人工标注成本较低。
-
公开(公告)号:CN116796865A
公开(公告)日:2023-09-22
申请号:CN202310432186.7
申请日:2023-04-20
Applicant: 上海人工智能创新中心 , 上海交通大学
IPC: G06N20/20 , G06F18/214
Abstract: 本发明公开一种联邦学习的泛化调整方法,其首先在本地终端计算泛化差异,然后在本地终端进行第r轮训练,得到第r轮次的本地模型,并将第r轮次的本地模型及泛化差异上传至服务器端,最后在服务器端进行全局模型参数聚合,得到第r+1轮次的全局模型。其可以最小化联邦学习训练过程中各个本地终端的泛化差异方差,进而有效地降低全局模型在跨域时的泛化误差,改善联邦领域的泛化问题。
-
公开(公告)号:CN114022475A
公开(公告)日:2022-02-08
申请号:CN202111397389.4
申请日:2021-11-23
Applicant: 上海交通大学
Abstract: 本发明提供了一种基于自监督掩膜的图像异常检测和异常定位方法及系统,涉及计算机视觉和图像处理技术领域,该方法包括:掩膜随机生成步骤、掩膜初始化步骤、生成初始化掩膜、图像特征提取步骤、图像重建步骤、重建图像对齐步骤、掩膜更新步骤、掩膜更新终止决策步骤以及异常评定步骤。本发明通过引入自监督掩膜的训练,提高了异常检测算法的异常定位能力,从而在异常检测和异常定位任务上取得较好的性能。
-
公开(公告)号:CN119132638A
公开(公告)日:2024-12-13
申请号:CN202411260849.2
申请日:2024-09-09
Applicant: 上海交通大学医学院附属瑞金医院
Abstract: 本申请公开了一种信息提取方法、装置、设备、存储介质和程序产品,涉及信息处理技术领域,包括:在第一类任务指令集中选择目标任务指令;每个第一类任务指令指示:提取由至少一个层次的信息构成的结构化信息;不同的第一类任务指令指示提取的结构化信息包含的信息层次数不同;将目标任务指令以及影像报告输入预先训练好的信息提取模型,得到从影像报告中提取的由一个或多个层次的信息构成的结构化信息;用于对信息提取模型进行训练的训练样本集中的每个训练样本均至少包括影像报告样本和第一类任务指令;训练样本的标签至少包括从影像报告样本中提取的由至少一个层次的信息构成的结构化信息,实现了不同层次的结构化信息的自动化提取。
-
-
-
-
-
-
-
-