公开(公告)号：CN115082293A

公开(公告)日：2022-09-20

申请号：CN202210650873.1

申请日：2022-06-10

Applicant: 南京理工大学

Inventor： 李敏 ,  范盼 ,  王梦文

IPC: G06T3/00 ,  G06T3/40 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了一种基于Swin Transformer和CNN双分支耦合的图像配准方法。该方法包括以下步骤：1、对原始数据中所有图像进行执行灰度值归一化、中心裁剪和重采样等标准的预处理步骤；2、将浮动图像和固定图像拼接后送入配准网络，并行经过Swin Transformer和CNN两个编码器分支；3、在Swin Transformer的每一个阶段，通过双分支特征耦合模块将Swin Transformer特征映射与对应分辨率的CNN特征映射进行特征交互与融合；4、解码器自适应调整来自编码器的深层特征与来自上层的特征，最后输出浮动图像和固定图像之间的形变场；5、将浮动图像和形变场输入空间变换网络，得到配准图像。6、计算配准图像与固定图像之间的相似性损失以及形变场的正则化损失，经反向传播训练网络。本发明使用Swin Transformer与CNN双分支进行特征提取，充分利用两种分支的优点，实现了特征互补。

公开(公告)号：CN115082293B

公开(公告)日：2024-09-06

申请号：CN202210650873.1

申请日：2022-06-10

Applicant: 南京理工大学

Inventor： 李敏 ,  范盼 ,  王梦文

IPC: G06T3/147 ,  G06T3/4007 ,  G06T3/4038 ,  G06T7/33 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/088 ,  G06N3/084 ,  G06N3/0985

Abstract: 本发明公开了一种基于Swin Transformer和CNN双分支耦合的图像配准方法。该方法包括以下步骤：1、对原始数据中所有图像进行执行灰度值归一化、中心裁剪和重采样等标准的预处理步骤；2、将浮动图像和固定图像拼接后送入配准网络，并行经过Swin Transformer和CNN两个编码器分支；3、在Swin Transformer的每一个阶段，通过双分支特征耦合模块将Swin Transformer特征映射与对应分辨率的CNN特征映射进行特征交互与融合；4、解码器自适应调整来自编码器的深层特征与来自上层的特征，最后输出浮动图像和固定图像之间的形变场；5、将浮动图像和形变场输入空间变换网络，得到配准图像。6、计算配准图像与固定图像之间的相似性损失以及形变场的正则化损失，经反向传播训练网络。本发明使用Swin Transformer与CNN双分支进行特征提取，充分利用两种分支的优点，实现了特征互补。

公开(公告)号：CN116152268A

公开(公告)日：2023-05-23

申请号：CN202111358244.3

申请日：2021-11-16

Applicant: 南京理工大学

Inventor： 李敏 ,  单芳湄 ,  王梦文

IPC: G06T7/11 ,  G06T7/00 ,  G06V10/80 ,  G06V10/52 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/048 ,  G06N3/08

Abstract: 本发明公开了一种融合注意力机制的多尺度肠道息肉分割方法。本发明方法的基本特征为：1、构建多尺度有效语义融合模块，提取更加丰富且有效的多尺度语义信息；2、构建一种全新的编码‑解码深度网络分割模型，提高息肉分割准确度；该方法通过提取足够的上下文信息以及不同感受野下的全局信息，并尽可能将那些对分割任务无用的特征筛选掉，克服了传统编码‑解码结构中语义信息受限且大量冗余的缺陷，对具有不同形态、不同大小息肉区域的二维肠镜图像均具有优良的分割及泛化性能。