基于双向交替融合策略的可见光-热红外显著目标检测方法

    公开(公告)号:CN118038228A

    公开(公告)日:2024-05-14

    申请号:CN202410313041.X

    申请日:2024-03-19

    Applicant: 安徽大学

    Abstract: 本发明公开一种基于双向交替融合策略的可见光‑热红外显著目标检测方法,充分的挖掘两个模态的信息提高显著目标检测的性能。通过特征擦除模块将另一个模态与本模态共有的信息进行擦除使网络能够学习模态本身特有的特征信息;通过全局上下文增强模块将可见光模态特征、热红外模态特征和擦除模块生成的特异性特征通过多头注意力进行初步的融合得到丰富的全局上下文信息再引入可变形卷积得到显著目标的自适应位置信息,使得网络能够更好的完成检测通过双向交替解码器中的多模态交互模块将一个模态高层的融合特征交替与另一个模态低层特征进行融合,使网络能够学习到丰富的语义信息和细节信息。本发明在现有的可见光‑热红外显著目标检测数据集上取得了最好的效果。

Patent Agency Ranking