公开(公告)号：CN114998667A

公开(公告)日：2022-09-02

申请号：CN202210497054.8

申请日：2022-05-09

Applicant: 华南理工大学

Inventor： 张浪文 ,  解宇敏 ,  谢巍 ,  余孝源

IPC: G06V10/77 ,  G06N3/04 ,  G06N3/08 ,  G06V10/774 ,  G06V10/80 ,  G06V10/82

Abstract: 本发明公开了一种多光谱目标检测方法、系统、计算机设备及存储介质，该方法包括：将获取的多光谱图像数据划分为训练集和验证集；构建的多光谱目标检测模型采用目标检测网络Yolov5作为基础架构，Backbone部分包括具有增强特征交互作用的双流特征提取网络和整合互补信息作用的自注意力特征融合模块；利用训练集训练多光谱目标检测模型，并利用验证集评估模型性能，获取最佳模型权重参数；将待测多光谱图像输入最佳模型权重参数的多光谱目标检测模型，得到待测图像中目标的坐标、类别和置信度等预测结果。本发明提供的方法通过构建多光谱目标检测模型，增强了网络对环境光照变化的鲁棒性，从而提高了模型在不良光照条件下的检测精度。

公开(公告)号：CN114359687A

公开(公告)日：2022-04-15

申请号：CN202111483806.7

申请日：2021-12-07

Applicant: 华南理工大学

Inventor： 张浪文 ,  张晋凯 ,  解宇敏 ,  刘洁耿 ,  施唯 ,  彭雄峰 ,  胡俊嘉 ,  罗其昆 ,  时佰仟

IPC: G06V20/00 ,  G06V10/25 ,  G06V10/44 ,  G06V10/774 ,  G06V10/764 ,  G06V10/80 ,  G06K9/62

Abstract: 本发明公开了一种基于多模态数据双重融合的目标检测方法、装置、电子设备和存储介质，所述方法包括：根据可见光‑红外目标检测数据集中任意一对可见光图像和红外图像，生成融合图像；由可见光图像和红外图像与融合图像构成数据样本；利用数据样本训练检测器，得到训练好的不同模态的检测器；根据待测的一对可见光图像和红外图像，生成待测融合图像；将待测的可见光图像和红外图像与待测融合图像分别输入训练好的对应模态的检测器，得到检测结果；将检测结果融合，得到最终检测结果。本发明综合利用像素级融合和决策级融合两种不同层级融合的优点，使可见光模态和红外模态的信息尽可能被充分利用，从而具有更优秀的全天候检测性能。