公开(公告)号：CN118351305A

公开(公告)日：2024-07-16

申请号：CN202410427142.X

申请日：2024-04-10

Applicant: 重庆邮电大学

Inventor： 谢颖 ,  唐贤伦 ,  赵坤驰 ,  彭江平 ,  李波 ,  钱晓东 ,  尚靖凯

IPC: G06V10/26 ,  G06V10/25 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/08 ,  G06V10/80 ,  G06V10/42 ,  G06T7/269

Abstract: 本发明公开了一种基于频域与空间域信息融合的实时实例分割方法，首先设置模型训练的损失函数；然后，采用带动量的随机梯度下降算法作为优化方法，并采用了非极大值抑制算法消除重复检测；接着，搭建由多个残差块堆叠组成的ResNet50残差网络架构作为主干网络；然后，采用改进的双向特征金字塔结构对后三个卷积模块的特征图进行操作融合语义信息，并引入频域表示以获得更准确全局信息；最后，将完成信息融合的最后一层特征图输入到掩模分支，使用改进的频域表示特征融合方法将得到的掩模系数和原型掩模特征图相结合，得到目标物体的位置坐标、类别信息和像素分割结果。本发明在实时(每秒超过30帧)的基础上有效地提高了图像的分割精度，且结构合理。