基于相机和激光雷达的三维目标检测方法及系统

    公开(公告)号:CN115015954A

    公开(公告)日:2022-09-06

    申请号:CN202210611165.7

    申请日:2022-05-31

    Abstract: 本发明公开的一种基于相机和激光雷达的三维目标检测方法,具体如下:基于相机采集的环境图像来获取各像素点的语义信息,将像素的语义信息关联至激光雷达采集到的环境点云Ⅰ,形成语义点云;基于语义点云提取每个目标物的点云群组,对掉环境点云Ⅰ进行过滤形成环境点云Ⅱ;获取环境点云Ⅱ中包含目标物的建议区域及其置信度;基于建议区域的置信度、建议区域中心在图像中的投影点相对于目标在图像的检测区域中心的距离对建议区域进行过滤;提取剩余建议区域对应环境点云中的目标物及其建议区域,即为从环境中提取到的目标物。对于远距离稀疏的目标点云,够降低对真阳性的漏检风险;对于具有模糊特征的目标,能够降低对于假阳性的误检风险。

    基于多模态融合的三维目标检测方法及系统

    公开(公告)号:CN115937819A

    公开(公告)日:2023-04-07

    申请号:CN202211487209.6

    申请日:2022-11-24

    Abstract: 本发明公开了基于多模态融合的三维目标检测方法及系统,其中方法包括下列步骤:S1、获取相机采集的图像数据;S2、获取激光雷达采集的原始的点云数据,并对点云进行降噪预处理;S3、将图像和点云的数据分别输入到训练后的相应网络中,获得对应的图像特征和点云特征;S4、将二维图像的图像特征映射到三维的点云空间坐标系;S5、将所述点云特征与映射后的图像特征进行级联,将其输入到自适应表现力增强融合模块,进行重新校准,得到加权后的融合特征;S6、将加权后的融合特征输入到检测输出网络,对目标进行边界框的生成,进而完成三维目标检测。本发明有效的抑制了不重要的特征表现,可以提升后续检测输出模块的3D目标检测的精度。

Patent Agency Ranking