公开(公告)号：CN118351005A

公开(公告)日：2024-07-16

申请号：CN202410540723.4

申请日：2024-04-30

Applicant: 海南大学

Inventor： 冯思玲 ,  王巧云 ,  林聪 ,  黄梦醒 ,  张桂榕

IPC: G06T5/50 ,  G06T5/60 ,  G06N3/096 ,  G06N3/045 ,  G06N3/0464 ,  G06N3/088

Abstract: 本发明提供一种构建分布式红外与可见光图像融合框架的方法，所述方法包括S1、构建分布式融合网络，分布式融合网络用于根据源图像进行图像的特征提取与融合处理，其中源图像包括可见光图像和红外图像；S2、设计知识蒸馏损失，并将知识蒸馏损失引入融合网络中；S3、设计内容损失，并将内容损失引入融合网络中；S4、构建无监督语义分割网络，用于与分布式融合网络级联，以获取融合图像的语义分割数据并指导无监督语义分割网络的训练。本发明通过设计特定的网络结构、知识蒸馏损失和内容损失，使得融合图像保留了红外图像中的热辐射信息和可见光图像中的纹理信息；同时，引入无监督语义分割网络与融合网络级联，提升融合图像中包含的语义信息。