公开(公告)号：CN117292244A

公开(公告)日：2023-12-26

申请号：CN202311352355.2

申请日：2023-10-18

Applicant: 南京信息工程大学

Inventor： 陈海秀 ,  房威志 ,  陆康 ,  黄仔洁 ,  陈嘉越 ,  褚羽婷

IPC: G06V10/86 ,  G06V10/44 ,  G06V10/82 ,  G06N3/0464 ,  G06V10/74 ,  G06V10/774

Abstract: 本发明公开了一种基于多层卷积的红外与可见光图像融合方法，网络结构包括编码网络、解码网络和多层卷积融合网络，所述编码器由多层卷积块和ECA注意力机制相互嵌套构成；所述解码器主要由解码块所构成，每个解码块由两个卷积层组成；所述多层卷积融合网络主要由梯度卷积块、下采样卷积块、卷积空间通道注意力机制以及若干卷积层构成；包括步骤如下：S1，将配准后的红外源图像和可见光源图像成对送入编码器中，由编码器提取源图像特征；S2，由多层卷积融合网络对源图像特征进行融合，得到融合后的特征；S3，解码器对融合后的特征进行重建，输出图像。本发明融合后的图像目标突出、细节清晰、轮廓明显、指标提升显著，符合人类视觉感受。