公开(公告)号：CN118628726A

公开(公告)日：2024-09-10

申请号：CN202310213338.4

申请日：2023-03-08

Applicant: 上海电力大学

Inventor： 蒋志哲 ,  林雨欣 ,  张宇华

IPC: G06V10/26 ,  G06V10/46 ,  G06V10/80 ,  G06V10/44 ,  G06V10/25 ,  G06V10/82 ,  G06N3/0464

Abstract: 本发明涉及一种双光融合的目标检测分割方法。其方法包括以下步骤，利用双通道采集目标配电设备的红外图像和可见光图像；基于SIFT和PSO算法完成对可见光与红外图的配准对齐，将对齐后的数据输入到Mask RCNN检测分割模型中；利用两个独立的backbone提取可见光模态与温度图模态的特征；根据FPN特征层融合中的结果，设置RPN只利用可见光模态生成推荐候选框；分别将输出的特征中推荐候选框的对应部分输入到检测与分割的ROI‑head中并继续提取特征；将两个模态在ROI‑head中提取出的特征进行融合并完成预测。使用可见光和红外图像融合的目标检测分割方法，相比于可见光或温度图单模态检测分割的准确率提升，能够有效的提高目标检测分割的精度。