-
公开(公告)号:CN115761472A
公开(公告)日:2023-03-07
申请号:CN202310024781.7
申请日:2023-01-09
Applicant: 吉林大学
Abstract: 本发明是一种基于融合事件和RGB数据的水下暗光场景重建方法。本发明涉及水下机器视觉技术领域,本发明利用事件相机采集的水下暗光事件序列和弱曝光RGB帧构建基准数据集;针对事件序列的异步稀疏性,对每一场景事件序列采用体素网格方式进行分段化表征;利用特征编码网络对事件序列和RGB帧进行特征编码,利用基于特征金字塔的多级Transformer编码器,得到多尺度事件和RGB特征提取分支;利用多阶段残差学习,融合事件和RGB特征,利用逐级上采样特征解码器,最终输出清晰的水下重建场景。实现对事件数据和RGB数据的高效融合,并在水下暗光场景重建清晰的图像,为水下的检测、识别和追踪任务提供了鲁棒的视觉表达。
-
公开(公告)号:CN101272328A
公开(公告)日:2008-09-24
申请号:CN200810050426.2
申请日:2008-02-29
Applicant: 吉林大学
Abstract: 一种基于智能代理系统的分散式社会网络聚类方法,包括下列步骤:定义网络聚类评价函数;变量、移动代理初始化;获取移动代理当前所在节点的标识符;更新节点特征值;更新所有邻居局部冲突函数值;选择新的邻居节点;判断当前移动代理移动步数是否大于规定的最大步数,如果是,该移动代理休眠;否则移动代理移动到下一节点,获取移动代理当前所在节点的标识符;判断是否所有移动代理都已经休眠,如果不是,等待,否则,结束。本发明为社会网络聚类提供一种全新高效的方法,适用于传统方法无法解决的分布式复杂网络聚类问题。
-
公开(公告)号:CN117690190B
公开(公告)日:2024-08-13
申请号:CN202410130129.8
申请日:2024-01-31
Applicant: 吉林大学
IPC: G06V40/20 , G06V20/05 , G06V10/34 , G06V10/426 , G06V10/44 , G06V10/52 , G06V10/62 , G06V10/82 , G06N3/0455 , G06N3/0464 , G06N3/084 , G06N3/0895
Abstract: 本发明属于水下动作识别技术领域,本发明公开了基于超图文本对比的水下动作识别方法、系统及存储介质,包括以下步骤:获取水下动作基准数据集;基于姿态估计法提取水下各种动作指令下的水下人体骨骼数据;对基本人体骨骼进行分区设计,建立关于骨骼关节点的超边,进而获得超图;将所述超图和所述水下人体骨骼数据进行结合,输出水下骨骼的超边特征;基于Transformer模型,输出骨骼特征,将所述骨骼特征和所述文本模型中的文本特征进行对比学习,最终输出精确的潜水员动作指令识别结果。本发明,将超图与输入特征结合推到超边特征,采用文本编码器生成文本特征,实现骨骼‑文本的对比学习,有效地利用多模态信息进一步提升潜水员动作识别的效能。
-
公开(公告)号:CN117893894B
公开(公告)日:2024-06-11
申请号:CN202410294510.8
申请日:2024-03-15
Applicant: 吉林大学
IPC: G06V20/05 , G06N3/045 , G06N3/0464 , G06N3/0495 , G06N3/08 , G06V10/25 , G06V10/82
Abstract: 一种基于红外偏振图像的水下目标轻量化检测方法及装置,涉及水下机器视觉目标检测技术领域,方法包括:基于红外偏振相机采集水下目标红外偏振图像;将所述目标红外偏振图像划分为训练集和测试集;设计增强特征提取模块,并插入SlimNeck网络中,构成轻量化颈部网络;设计轻量化检测头SlimDetect,并采用所述轻量化检测头SlimDetect和所述轻量化颈部网络替换单阶段目标检测模型中的对应部分,得到轻量化目标检测模型;基于所述训练集训练所述轻量化目标检测模型;将训练后的轻量化目标检测模型用于水下目标检测;该方法通过轻量化设计,减少模型的参数量和计算复杂度,使得在资源有限的水下设备上实现实时目标检测成为可能。
-
公开(公告)号:CN117590867B
公开(公告)日:2024-03-26
申请号:CN202410070527.5
申请日:2024-01-18
Applicant: 吉林大学
IPC: G05D1/485 , G05D101/10
Abstract: 基于深度强化学习的水下自主航行器接驳控制方法和系统,涉及水下航行器的接驳控制领域。解决现有水下自主航行器的接驳基于导航信息的Pid控制,控制稳定性受洋流影响大,面对未知障碍物时决策能力不足的问题。方法包括:根据海洋环境数据和接驳控制任务场景构建状态空间和动作空间以及仿真环境模型;设计奖励函数;构建基于SAC改进的深度神经网络模型;初始化深度神经网络模型参数和经验重放缓冲区;深度神经网络模型根据当前环境状态信息输入,输出当前时间步下的最优决策,并与模拟环境模型交互,产生新状态并存储;训练深度神经网络模型,利用模型为水下自主航行器提供接驳控制支持。应用于水下探测领域。
-
公开(公告)号:CN117745596A
公开(公告)日:2024-03-22
申请号:CN202410182761.7
申请日:2024-02-19
Applicant: 吉林大学
IPC: G06T5/77 , G06N3/0455 , G06N3/0464 , G06N3/048 , G06N3/0499 , G06N3/08 , G06T5/50 , G06T5/60
Abstract: 一种基于跨模态融合的水下去遮挡方法。本发明属于水下机器视觉的技术领域,具体而言,涉及事件和RGB两种数据模态深度融合方法,以及基于事件和RGB数据的水下场景去遮挡重建方法。本发明提供了一种基于跨模态融合的水下去遮挡方法,解决了现有技术中在水下去遮挡时都是先将事件序列与RGB图像各自的特征先进行编码后再融合,此种处理方式容易导致模型计算量和硬件要求翻倍,无法适配于资源受限的水下环境的问题。本发明所述方法将事件序列与RGB图像直接进行融合,然后再进行编码解码,在前融合阶段进行数据融合,减少了系统对计算量的要求,使网络更加轻量化。
-
公开(公告)号:CN116912675A
公开(公告)日:2023-10-20
申请号:CN202311175150.1
申请日:2023-09-13
Applicant: 吉林大学
IPC: G06V20/05 , G06N3/0464 , G06N3/0475 , G06N3/094 , G06N3/096 , G06V10/80 , G06V10/82
Abstract: 一种基于特征迁移的水下目标检测方法及系统,涉及水下机器视觉目标检测技术领域。解决现有水下目标检测方法存在的水下图像质量差、识别误差大和泛化能力差的问题。方法为:构建基准数据集进而训练迁移对抗学习网络模型,采用训练后的迁移对抗学习网络模型将水下高清图像的特征迁移到水下模糊目标图像上;将两层坐标注意力增强模块添加到YOLOv5的骨干网络中,并添加一组锚框和SIOU位置损失函数,获得DCA‑YOLOv5目标检测模型;采用DCA‑YOLOv5目标检测模型对特征增强后的水下高清目标图像进行目标检测,获得目标的位置和类别信息。本发明适用于水下模糊场景增强以及高精度的水下目标检测。
-
公开(公告)号:CN116405626B
公开(公告)日:2023-09-22
申请号:CN202310650996.X
申请日:2023-06-05
Applicant: 吉林大学
IPC: H04N7/01 , G06T5/00 , G06N3/0464 , G06N3/0455
Abstract: 本发明是一种全局匹配的水下运动目标视觉增强方法。本发明涉及模式识别技术领域,本发明利用水下摄影设备采集目标的RGB视频序列数据集;利用基于特征金字塔的多级编码器,得到多尺度RGB边界帧特征;利用滑动窗口的分层视觉变换器进行特征增强;对提取的特征进行全局相关性匹配;利用逐级上采样特征解码器,并在上采样的过程中联合优化中间光流和中间帧特征,最终输出清晰视频中间帧;使用图像损失结合约束重建中间帧。通过通过本申请中的技术方案,实现了为水下视频重建清晰的中间帧,增强了运动目标的视觉质量,提高了水下视频的帧率,为水下的检测、识别和追踪等任务提供了鲁棒的视觉表达。
-
公开(公告)号:CN116682000A
公开(公告)日:2023-09-01
申请号:CN202310936412.5
申请日:2023-07-28
Applicant: 吉林大学
IPC: G06V20/05 , G06N3/0464 , G06N3/08 , G06V10/80 , G06V10/82
Abstract: 一种基于事件相机的水下蛙人目标检测方法。属于水下机器视觉目标检测技术领域,具体涉及水下蛙人目标检测领域。其解决了以往的水下蛙人目标检测缺乏鲁棒性强的特征信息的问题。所述方法具体为:利用事件相机获取水下蛙人事件序列和RGB图像,设计RGB残差学习模块,用于充分提取水下蛙人RGB图像空间特征信息,设计事件残差学习模块,用于充分提取水下蛙人事件图像纹理特征信息,设计特征融合网络,使水下蛙人RGB图像特征信息与水下蛙人事件图像特征信息进行细粒度特征融合。本发明所述方法可以应用在水下目标检测技术领域、水下航行安全检测领域以及水下目标识别设备制造领域。
-
公开(公告)号:CN116405626A
公开(公告)日:2023-07-07
申请号:CN202310650996.X
申请日:2023-06-05
Applicant: 吉林大学
IPC: H04N7/01 , G06T5/00 , G06N3/0464 , G06N3/0455
Abstract: 本发明是一种全局匹配的水下运动目标视觉增强方法。本发明涉及模式识别技术领域,本发明利用水下摄影设备采集目标的RGB视频序列数据集;利用基于特征金字塔的多级编码器,得到多尺度RGB边界帧特征;利用滑动窗口的分层视觉变换器进行特征增强;对提取的特征进行全局相关性匹配;利用逐级上采样特征解码器,并在上采样的过程中联合优化中间光流和中间帧特征,最终输出清晰视频中间帧;使用图像损失结合约束重建中间帧。通过通过本申请中的技术方案,实现了为水下视频重建清晰的中间帧,增强了运动目标的视觉质量,提高了水下视频的帧率,为水下的检测、识别和追踪等任务提供了鲁棒的视觉表达。
-
-
-
-
-
-
-
-
-