-
公开(公告)号:CN115563316A
公开(公告)日:2023-01-03
申请号:CN202211322568.6
申请日:2022-10-27
Applicant: 桂林电子科技大学
IPC: G06F16/43 , G06F16/45 , G06F16/483
Abstract: 本发明提供了一种跨模态检索方法以及检索系统,所述检索方法包括:采用CLIP预训练模型对特征进行编码,获得包括原始图像以及文本的原始模态特征;将所述原始模态特征进行注意力对齐处理得到模态对齐数据以实现原始模态互相之间的语义相关;将上述步骤形成的所述模态数据通过权重共享的多层感知机以保持模态的不变性;利用Arc4cmr损失函数将最终得到的特征数据分布到归一化超球面上进行类别边界约束。本发明的跨模态检索方法使得成对的图像与文本的公共表示尽可能相近,实现同时增强类内紧性和类间差异性。
-
公开(公告)号:CN115527094A
公开(公告)日:2022-12-27
申请号:CN202211328913.7
申请日:2022-10-27
Applicant: 桂林电子科技大学
Abstract: 本发明提供了一种目标检测方法以及检测系统,所述检测方法包括:采用主干特征提取网络,对输入的图片进行特征提取得到特征图;对所述特征图进行多分支空洞卷积注意力处理,加强感兴趣信息的特征表示,经过双向特征金字塔结构,丰富不同层级的特征信息;利用所述双向特征金字塔结构产生的多尺度特征对目标的位置和类别进行预测。本发明的目标检测方法,通过多尺度注意力特征金字塔网络和广义交并比损失函数(GIoU),捕获多尺度上下文信息,将高层特征和低层特征有效融合,丰富不同层级的特征信息,使模型更加准确地定位和识别感兴趣的物体,从而进一步提高目标检测的精度。
-
公开(公告)号:CN114993286B
公开(公告)日:2024-04-12
申请号:CN202210533368.9
申请日:2022-05-13
Applicant: 桂林电子科技大学
Abstract: 本发明公开了一种基于图像、激光雷达与里程计的网格地图创建方法及装置,所述方法在采集信息阶段通过时间戳近似同步的方法将机器采集到的数据进行融合,提高信息间的关联性,在地图创建阶段根据采集图像的差异程度确定网格地图中每个网格的大小与网格内的角度区间,在保存地图信息时将采集到的图像数据通过卷积自编码器压缩为一维特征向量后与里程计信息并联存储,同时可以实现在需要查看图像信息时将特征向量信息复原为图像信息,在地图创建时使用分块更新的方法对创建出的地图轮廓进行实时更新。本发明和传统方法相比,具有存储空间占用少,地图创建速度快的优势,解决了传统网格地图中无法展示图像信息以及地图实时性较差的问题。
-
公开(公告)号:CN114993286A
公开(公告)日:2022-09-02
申请号:CN202210533368.9
申请日:2022-05-13
Applicant: 桂林电子科技大学
Abstract: 本发明公开了一种基于图像、激光雷达与里程计的网格地图创建方法及装置,所述方法在采集信息阶段通过时间戳近似同步的方法将机器采集到的数据进行融合,提高信息间的关联性,在地图创建阶段根据采集图像的差异程度确定网格地图中每个网格的大小与网格内的角度区间,在保存地图信息时将采集到的图像数据通过卷积自编码器压缩为一维特征向量后与里程计信息并联存储,同时可以实现在需要查看图像信息时将特征向量信息复原为图像信息,在地图创建时使用分块更新的方法对创建出的地图轮廓进行实时更新。本发明和传统方法相比,具有存储空间占用少,地图创建速度快的优势,解决了传统网格地图中无法展示图像信息以及地图实时性较差的问题。
-
-
-