公开(公告)号：CN119296711A

公开(公告)日：2025-01-10

申请号：CN202411213591.0

申请日：2024-08-30

Applicant: 北京邮电大学

Inventor： 陈姝羽 ,  侯泽毅 ,  周修庄

IPC: G16H15/00 ,  G16H30/40 ,  G06V30/19 ,  G06V10/82 ,  G06N3/045 ,  G06N3/08

Abstract: 本公开提供了一种胸部放射影像报告生成方法、装置、电子设备及存储介质。其中，该方法包括：利用解剖区域检测器，得到胸部放射影像对应的多个解剖区域类别的视觉特征图像；依据解剖区域选择模块和异常分类模块，对视觉特征图进行识别，确定视觉特征图中文本生成区域；对文本生成区域进行对比注意力增强，得到文本生成区域对应的残差视觉特征；利用预设语言模型以及残差视觉特征，得到文本生成区域对应的多个文本，并利用多个文本生成胸部放射影像报告，通过关注胸部影像的局部解剖区域特征，有效分解生成完整胸部放射影像报告的复杂任务，并提升生成文本的准确性和一致性。同时，将文本生成与局部解剖区域结合，增强报告的可解释性和安全性。

公开(公告)号：CN116843778B

公开(公告)日：2024-03-26

申请号：CN202310587337.6

申请日：2023-05-23

Applicant: 北京邮电大学

Inventor： 周修庄 ,  侯泽毅 ,  郎宁

IPC: G06T11/00 ,  G06T11/60 ,  G06V10/82 ,  G06V20/62 ,  G06V30/413 ,  G06F40/30 ,  G06F40/289 ,  G06N3/0455 ,  G06N3/0475 ,  G06N3/094

Abstract: 本申请提出一种基于放射学报告生成X线胸片图像的方法及系统，所述方法包括：获取待生成X线胸片图像的放射学报告的文本特征及预设的隐藏变量项；将所述文本特征和所述隐藏变量项输入预先训练好的X线胸片图像生成模型中，得到符合所述放射学报告描述的多个X线胸片图像；其中，所述X线胸片图像生成模型是以放射学报告的文本特征、隐藏变量项为输入，以放射学报告对应的多个X线胸片图像为输出，对生成对抗网络进行训练得到的。本申请提出的技术方案，提升了生成图像的保真度，同时基于引入隐藏变量项来生成X线胸片图像，保证了生成的胸片图像具有多样性。

公开(公告)号：CN116843778A

公开(公告)日：2023-10-03

申请号：CN202310587337.6

申请日：2023-05-23

Applicant: 北京邮电大学

Inventor： 周修庄 ,  侯泽毅 ,  郎宁

IPC: G06T11/00 ,  G06T11/60 ,  G06V10/82 ,  G06V20/62 ,  G06V30/413 ,  G06F40/30 ,  G06F40/289 ,  G06N3/0455 ,  G06N3/0475 ,  G06N3/094

Abstract: 本申请提出一种基于放射学报告生成X线胸片图像的方法及系统，所述方法包括：获取待生成X线胸片图像的放射学报告的文本特征及预设的隐藏变量项；将所述文本特征和所述隐藏变量项输入预先训练好的X线胸片图像生成模型中，得到符合所述放射学报告描述的多个X线胸片图像；其中，所述X线胸片图像生成模型是以放射学报告的文本特征、隐藏变量项为输入，以放射学报告对应的多个X线胸片图像为输出，对生成对抗网络进行训练得到的。本申请提出的技术方案，提升了生成图像的保真度，同时基于引入隐藏变量项来生成X线胸片图像，保证了生成的胸片图像具有多样性。