公开(公告)号：CN119992040A

公开(公告)日：2025-05-13

申请号：CN202411257787.X

申请日：2024-09-09

Applicant: 南京理工大学

Inventor： 赵茂杰 ,  郭唐仪 ,  宋杰龙 ,  郜远航 ,  张经武 ,  刘康

IPC: G06V10/25 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/08 ,  G06N3/045 ,  G06V10/44

Abstract: 本发明提出了一种基于声振时频特征和交叉注意力融合机制的交通目标检测识别方法。首先，采用声振传感器采集不同交通目标的声振信号，并进行归一化最小均方NLMS滤噪预处理。其次，对预处理后的声振信号进行变分模态分解VMD，采用尺度谱分割方法和求和模糊熵最小值方法，分解成多个本征模态函数IMF。再次，对声音信号IMF提取Mel语谱图，振动信号IMF提取小波变换时频图，将结果进行CNN卷积池化，通过transformer编码器进一步提取不同交通目标的声振信号特征。最后利用交叉注意力机制进行编码，将声音信号特征和振动信号特征融合为新的特征，利用Softmax函数和Dropout函数进行归一化和防止过拟合处理。本发明具有算法复杂度低，实时性强，成本较低的优势，同时解决了极端气候、天气、光线等场景下的交通目标检测问题。