公开(公告)号：CN118919013A

公开(公告)日：2024-11-08

申请号：CN202410984961.4

申请日：2024-07-22

Applicant: 湖南大学

Inventor： 彭绍亮 ,  赵雄君 ,  何长丰 ,  李冠霆 ,  姬博亚 ,  刘文娟 ,  许力文

IPC: G16H15/00 ,  G06F40/169 ,  G06F40/126 ,  G06F40/295 ,  G06F40/216 ,  G06F16/35 ,  G06N5/04

Abstract: 本发明公开了一种用于增强X光图像诊断的文本提示学习方法及装置。方法包括：S1、输入患者胸部X光图像数据集，所述X光图像数据集包含放射学报告#imgabs0#和相应的图像与人工注释标签；S2、在放射学报告中提取概念、位置和阳性，形成三元组数据；S3、将外部医学知识注入至所述三元组数据，形成新的细粒度数据；S4、为每个概念生成报告级提示嵌入；S5、为每个概念生成概念级提示嵌入；S6、计算报告级相似性和概念级相似性；S7、使用损失函数训练得到推理模型；S8、输入患者胸部X光图像输入至推理模型，推断得到某些概念和/或疾病的存在，并确定概念和/或疾病的视觉证据。本发明无需使用任何标记的图像，具有良好的可解释性能。