公开(公告)号：CN114331849A

公开(公告)日：2022-04-12

申请号：CN202210250052.9

申请日：2022-03-15

Applicant: 之江实验室

Inventor： 程乐超 ,  王良 ,  方超伟 ,  张鼎文

IPC: G06T3/40 ,  G06N3/04 ,  G06V10/80 ,  G06V10/82

Abstract: 本发明提出了一种跨模态核磁共振超分网络及图像超分辨率方法，通过引入T1WI核磁共振图像作为辅助信息重建高分辨率T2WI图像，实现不同模态之间的信息交流与互补，显著提高信息的融合能力，加强特征表达。将T2WI模态图像的低高频信息重建任务分而治之，利用卷积的局部感知特性及可变形网络的全局感知特性来加强网络对特征的感受能力，有效提升高频信息的重建效果。设计的模态间多头注意力模块，利用空间特征自相似性来有效融合特征非局部信息，有效提高模型泛化性。

公开(公告)号：CN114331849B

公开(公告)日：2022-06-10

申请号：CN202210250052.9

申请日：2022-03-15

Applicant: 之江实验室

Inventor： 程乐超 ,  王良 ,  方超伟 ,  张鼎文

IPC: G06T3/40 ,  G06N3/04 ,  G06V10/80 ,  G06V10/82

Abstract: 本发明提出了一种跨模态核磁共振超分网络及图像超分辨率方法，通过引入T1WI核磁共振图像作为辅助信息重建高分辨率T2WI图像，实现不同模态之间的信息交流与互补，显著提高信息的融合能力，加强特征表达。将T2WI模态图像的低高频信息重建任务分而治之，利用卷积的局部感知特性及可变形网络的全局感知特性来加强网络对特征的感受能力，有效提升高频信息的重建效果。设计的模态间多头注意力模块，利用空间特征自相似性来有效融合特征非局部信息，有效提高模型泛化性。