-
公开(公告)号:CN117788823A
公开(公告)日:2024-03-29
申请号:CN202311832392.3
申请日:2023-12-28
Applicant: 桂林电子科技大学
IPC: G06V10/26 , G01S7/48 , G01S17/86 , G06V10/40 , G06V10/764 , G06V10/80 , G06V10/82 , G06V20/56 , G06V20/70 , G06N3/0455 , G06N3/0464 , G06N3/096
Abstract: 本发明提供的是一种基于Transformer激光雷达点云和相机影像信息融合的语义分割方法,所述方法利用激光雷达点云和RGB影像信息的多模态数据,提取跨模态特征用于计算机视觉的语义分割任务。本发明的贡献在于训练阶段通过基于立方窗口和辐射窗口划分的多头注意力动态选择机制提取多尺度近密远疏的激光雷达点云特征,通过窗口重叠区域编码的多头注意力机制提取多尺度影像特征,然后以多尺度特征融合及知识蒸馏的方法将影像的先验知识有效地融入到激光雷达网络中,并在推理阶段抛弃相机流分支和多尺度特征融合‑知识蒸馏模块,仅使用激光雷达流分支,能有效提升网络的推理速度。
-
公开(公告)号:CN111275608B
公开(公告)日:2023-03-14
申请号:CN202010066954.8
申请日:2020-01-20
Applicant: 桂林电子科技大学
IPC: G06T1/20 , G05B19/042
Abstract: 本发明公开了一种基于FPGA的遥感影像正射纠正并行系统,所述数据加载模块将DEM数字高程模型分块及分块对应的原始影像同步发送至所述传输模块/存储芯片,所述转换模块将数据流转换成独立影像帧和分块的数字高程模型,所述写入模块将当前数字高程模型分块的宽度、高度及ID号发送至所述地面坐标生成模块,所述地面坐标生成模块生成地面空间坐标X、Y,所述高程插值模块获取数字高程值Z,所述3D‑2D坐标映射模块获取二维投影坐标,所述影像插值模块获取正射影像,设定输入原始遥感影像与输出正射影像的分辨率大小为1920*1080,FPGA处理器工作的时钟频率是150MHz,FPGA内部的片上存储资源BRAM为2MB时,平均在10ms时间内可完成一张影像正射纠正处理,具有极高的计算效率。
-
公开(公告)号:CN109859105B
公开(公告)日:2023-01-03
申请号:CN201910053008.7
申请日:2019-01-21
Applicant: 桂林电子科技大学
Abstract: 本发明提出一种无参数影像自然拼接方法,包括以下步骤:建立二次配准框架,分阶段获得二次配准模型参数;从基准影像匹配控制点集从中搜索初始缝合线SL,利用一次配准参数对SL进行映射得到待配准影像初始缝合线SR;对SL,SR所在像素实施动态规划匹配计算获得控制点加密后的基准影像缝合线SL',并利用二次配准参数对SL'进行映射得到待配准影像缝合线SR';利用二次配准参数及缝合线SL',SR'将待配准影像映射、融合到基准影像。本发明统筹图像配准和缝合线生成过程,仅利用基准影像和待拼接影像上的一组控制点对自动估计配准模型参数并从控制点对中生成配准误差可忽略的缝合线,进而融合生成视觉效果流畅的拼接影像,可有效克服现有方法依赖后期处理、重叠区域拼接存在局部鬼影现象之不足。
-
公开(公告)号:CN114627317A
公开(公告)日:2022-06-14
申请号:CN202210179144.2
申请日:2022-02-25
Applicant: 桂林电子科技大学
IPC: G06V10/74 , G06V10/764 , G06V10/774 , G06V10/82 , G06V10/40 , G06K9/62 , G06N3/04 , G06T7/73
Abstract: 本发明涉及深度学习技术领域,尤其涉及一种基于稀疏特征匹配点对的相机相对定向深度学习方法,首先通过匹配点对分类网络将匹配点对分为内点和外点,然后以所有的内点为相机相对位姿参数解算网络的输入,将输入的每对匹配点坐标看作图节点,将输入的所有匹配点对当作图结构数据,使用自注意力机制在图结构上提取匹配点对全局影像关系特征,并通过残差网络进一步提炼影像关系特征,以匹配点对为输入通过自注意力机制在图结构上的全局影像关系特征学习,解决了现有深度学习方法基于像素语义特征来进行相对定向的处理数据量大、模型结构复杂问题。
-
公开(公告)号:CN111275608A
公开(公告)日:2020-06-12
申请号:CN202010066954.8
申请日:2020-01-20
Applicant: 桂林电子科技大学
IPC: G06T1/20 , G05B19/042
Abstract: 本发明公开了一种基于FPGA的遥感影像正射纠正并行系统,所述数据加载模块将DEM数字高程模型分块及分块对应的原始影像同步发送至所述传输模块/存储芯片,所述转换模块将数据流转换成独立影像帧和分块的数字高程模型,所述写入模块将当前数字高程模型分块的宽度、高度及ID号发送至所述地面坐标生成模块,所述地面坐标生成模块生成地面空间坐标X、Y,所述高程插值模块获取数字高程值Z,所述3D-2D坐标映射模块获取二维投影坐标,所述影像插值模块获取正射影像,设定输入原始遥感影像与输出正射影像的分辨率大小为1920*1080,FPGA处理器工作的时钟频率是150MHz,FPGA内部的片上存储资源BRAM为2MB时,平均在10ms时间内可完成一张影像正射纠正处理,具有极高的计算效率。
-
公开(公告)号:CN108615041A
公开(公告)日:2018-10-02
申请号:CN201810436704.1
申请日:2018-05-09
Applicant: 桂林电子科技大学
Abstract: 本发明提出一种角点检测方法,该方法包括以下步骤:步骤一:在第一级筛选中设立条件C1,使用梯度算子获得边缘像素;步骤二:在第二级筛选中设立条件C2,在边缘像素中获得候选角点像素;步骤三:在第三级筛选中设立条件C3,通过梯度方向变化准则获取提炼后的候选角点像素;步骤四:在第四级筛选中设立条件C4,使用灰度分布准则获取真实角点。本算法能准确快速地检测图像中的角点,并可适用于不同灰度变化的图像,同时通过重复性测试发现其可重复性好于SIFT等经典特征点检测算法,故此算法可以作为特征点检测使用。
-
公开(公告)号:CN104601966B
公开(公告)日:2017-10-31
申请号:CN201510066231.7
申请日:2015-02-09
Applicant: 桂林电子科技大学
Abstract: 本发明公开了一种基于激光检测线的视觉分析人流量统计方法及设备,该方法通过网络摄像头从头顶采集包括两条激光线在内的某一出入口的人出入视频,提取出左右两条激光线作为左右两条检测线,生成高度轮廓线,判断是否为人经过,在匹配确定完成了一次人的进出后,就可以对进出的人流量统计,记录当前时间,可以统计出某段时间内某一出入口的进出人数,及通过两者之差得出场所内的已有人数,该方法实现进出人数的自动、准确、检测。该设备由多个探测单元构成,每个探测单元包括视频采集设备、激光设备、还包括网络设备、计算机或嵌入式处理设备,该设备提高了人流统计的精度、速度,步行方向也可以被检测到,可广泛应用到各入口或公共场合。
-
公开(公告)号:CN104584780A
公开(公告)日:2015-05-06
申请号:CN201510035992.6
申请日:2015-01-23
Applicant: 桂林电子科技大学
Abstract: 本发明公开了一种用于检测果实成熟度及采摘的柔性机械手,其特征是包括从上至下顺序连接的气动剪刀手机构、旋转机构、光电机构和传动机构,在气动剪刀手机构上设置有图像采集装置,图像采集装置与智能控制系统连接。本发明结构简单、自动化程度高,适用性广、移植性强。本系统能广泛适用于果蔬的采摘和回收,具有广阔的前景。
-
公开(公告)号:CN103324908A
公开(公告)日:2013-09-25
申请号:CN201210094103.X
申请日:2012-03-23
Applicant: 桂林电子科技大学
IPC: G06K9/00
Abstract: 用于虹膜识别的快速虹膜采集判断控制方法,对虹膜质量检测分成瞳孔粗定位后的快速初步检测与虹膜定位完后的精细检测。其中的初步虹膜质量检测方法速度很快,并且对虹膜的清晰度、运动模糊、有无眨眼、有效虹膜比例及是否为活体虹膜图像都进行了检测。通过了初步质量检测的虹膜图像95%以上满足最后精细虹膜检测的要求,从而使得采集速度有了很大的提高。在虹膜定位完成后对虹膜图像的精细质量检测主要包括对虹膜清晰度、虹膜的形变程度检测。并且在初步质量检测过程中对CCD的焦距、近红外光源的光强及用户显示接口进行了控制,在精细虹膜质量检测过程中对CCD的放大倍数进行了控制,从而使得用户使用起来更加方便。
-
公开(公告)号:CN118840490A
公开(公告)日:2024-10-25
申请号:CN202411001005.6
申请日:2024-07-25
Applicant: 桂林电子科技大学
IPC: G06T17/00 , G06N3/0464 , G06N3/082 , G06T15/00
Abstract: 本发明公开了一种基于无参影像的三维重建与渲染方法,输入多视角RGBD影像数据流,通过在公开数据集上训练光流估计网络得到的预训练模型对每一帧影像进行光流估计,根据光流阈值选择关键帧并使用关键帧集来构建关键帧图;通过共视关系在关键帧之间建立共视矩阵,在共视矩阵中的关键帧对建立边,对关键帧图中形成边的关键帧使用阻尼高斯‑牛顿法迭代优化关键帧的位姿;在关键帧图中动态选择K个共视关键帧作为动态滑动窗口,通过滑动窗口的关键帧信息进行高斯的动态插入与剪枝,使用高斯泼溅渲染关键帧的颜色、深度、可见性轮廓信息,将其与关键帧的真实颜色和深度信息求损失以优化3D高斯的场景表征。本发明解决了传统三维重建技术重建场景的质量差,训练和渲染时间长的问题,可以广泛应用于三维重建的相关应用之中。
-
-
-
-
-
-
-
-
-