一种基于特征解纠缠表示的红外与可见光图像融合方法

    公开(公告)号:CN117809146A

    公开(公告)日:2024-04-02

    申请号:CN202311700020.5

    申请日:2023-12-11

    Applicant: 江南大学

    Abstract: 本申请公开了一种基于特征解纠缠表示的红外与可见光图像融合方法,涉及图像融合技术领域,该方法利用两个双编码器分别提取红外源图像和可见光源图像的共享特征和模态独有特征,然后对两组共享特征进行融合,对两组模态镀有特征进行融合,再经过解码器得到融合后的图像。该方法在对红外和可见光图像中的深度特征进行解纠缠分离共享特征和独有特征的基础上,采用经过深度优化的融合策略完成图像融合。这种方法不仅确保了融合图像中两种模态的核心信息得到完整体现,而且避免了混合处理特征而导致的图像失真,确保生成的融合图像的质量。

    基于层分离和重参数的红外和可见光图像融合方法

    公开(公告)号:CN116091372B

    公开(公告)日:2023-08-15

    申请号:CN202310005792.0

    申请日:2023-01-03

    Applicant: 江南大学

    Abstract: 本发明涉及一种基于层分离和重参数的红外和可见光图像融合方法,包括以下步骤:步骤一、构建重参数融合网络;步骤二、对重参数融合网络进行训练,其中对于重参数融合网络的训练阶段,设置层分离引导网络,层分离引导网络以红外光图像作为输入,通过自编码器分离出红外光图像中的显著特征并生成引导掩码;引导掩码作为后续的引导融合损失中的一部分,指导重参数融合网络的训练;步骤三、部署训练好的重参数网络模型。本发明有益效果:层分离引导网络生成引导掩码指导重参数融合网络的训练,缓解了融合过程中红外和可见光图像的信息相互影响而导致融合图像的显著特征和纹理细节相较源图像退化的问题,显著提升了融合图像的质量。

    一种基于核空间和隐式空间特征对齐的多目标跟踪方法

    公开(公告)号:CN115272404B

    公开(公告)日:2023-07-18

    申请号:CN202210689366.9

    申请日:2022-06-17

    Applicant: 江南大学

    Inventor: 孔军 刘加林 蒋敏

    Abstract: 本发明所提供的一种多目标跟踪方法首先对于共享特征,在通道维度完成全局平均池化,计算得到共享语义向量,并将这个共享语义向量通过维度变换分别获得一个代表浅层语义信息的低维向量和一个代表深层语义信息的高维向量。紧接着,通过乱序重排,高低维度向量分裂和重组等操作解耦共享语义向量,获得适配检测分支和重识别分支的高低维度对齐语义向量。最后,与共享特征加权求和,获得多维度语义对齐的检测特征和重识别特征。通过本发明提出的多维语义对齐模块,两个子分支任务将浅层和深层维度的语义特征对齐,并进行了独立的选择,有效地缓解了联合优化过程中对特征关注焦点位置的竞争。

    一种行人重识别模型训练的方法、装置和设备

    公开(公告)号:CN114663685B

    公开(公告)日:2023-07-04

    申请号:CN202210181439.3

    申请日:2022-02-25

    Applicant: 江南大学

    Inventor: 蒋敏 马磊 孔军

    Abstract: 本发明公开了一种行人重识别模型训练的方法、装置、设备以及计算机可读存储介质,包括:基于两个卷积神经网络构建两个行人重识别网络模型;将目标域图像集输入每个行人重识别网络模型中,利用卷积神经网络和Transformer提取中间特征;利用全局子值池化模块对中间特征进行处理,输出最终特征值,并进行聚类分析,得到硬伪标签;构建每个行人重识别网络模型的时序平均模型,将目标域图像集输入每个时序平均模型中,得到软伪标签;利用软硬伪标签代优化行人重识别网络模型,选取目标行人重识别网络模型。本发明通过Transformer和全局子值池化模块获得高质量的特征信息,通过聚类得到更高质量的伪标签,大幅提高模型性能,提高行人重识别的准确度。

    基于层分离和重参数的红外和可见光图像融合方法

    公开(公告)号:CN116091372A

    公开(公告)日:2023-05-09

    申请号:CN202310005792.0

    申请日:2023-01-03

    Applicant: 江南大学

    Abstract: 本发明涉及一种基于层分离和重参数的红外和可见光图像融合方法,包括以下步骤:步骤一、构建重参数融合网络;步骤二、对重参数融合网络进行训练,其中对于重参数融合网络的训练阶段,设置层分离引导网络,层分离引导网络以红外光图像作为输入,通过自编码器分离出红外光图像中的显著特征并生成引导掩码;引导掩码作为后续的引导融合损失中的一部分,指导重参数融合网络的训练;步骤三、部署训练好的重参数网络模型。本发明有益效果:层分离引导网络生成引导掩码指导重参数融合网络的训练,缓解了融合过程中红外和可见光图像的信息相互影响而导致融合图像的显著特征和纹理细节相较源图像退化的问题,显著提升了融合图像的质量。

    基于Multiformer及离群样本重分配的无监督行人重识别方法

    公开(公告)号:CN115601791B

    公开(公告)日:2023-05-02

    申请号:CN202211404730.9

    申请日:2022-11-10

    Applicant: 江南大学

    Abstract: 本发明涉及一种基于Multiformer及离群样本重分配的无监督行人重识别方法。其基于Transformer网络构建多分支网络识别模型Multiformer,包括单相机域Intraformer网络以及多相机域Interformer网络,所有的单相机域Intraformer网络共享骨干网络参数,增强泛化能力,在一定程度上缓解了由不同相机域的背景、光照等带来的域间差异,提高了模型对噪音伪标签的鲁棒性,进一步提升了无监督行人重识别的精度。利用自适应离群样本重分配,可扩展伪标签的数量,增强了多分支网络识别模型Multiformer的特征表示能力。在模型训练时,利用实例级对比学习与聚类级对比学习组成的联合学习,可以大幅度提高聚类的准确度,缓解噪音伪标签的问题,从而有效提高无监督行人重识别的准确性与鲁棒性。

Patent Agency Ranking