-
公开(公告)号:CN117788313A
公开(公告)日:2024-03-29
申请号:CN202311847434.0
申请日:2023-12-29
Applicant: 南京邮电大学
Abstract: 本发明公开了一种基于双重对比学习和梯度通道注意力机制的医学图像融合方法,属于图像融合领域,包括:将非对齐的训练集输入主干网络提取不同模态的共享特征;将z1、z2分别输入MPCRM模块输出粗配准图像f1;将f1输入MPFRM模块,经过内部变形场和空间变换以校正局部视差,最后通过反向变形场获取精配准图像f2;将f2与参考图像Iy分别通过MPEEM模块以双重对比学习到具有较高视觉质量和信息量的特征,分别输出特征z3,z4;最后以z3,z4为基准在MPFM模块中基于梯度通道注意力机制得到融合图像f3;本发明的图像融合方法能够保留输入图像细节的同时实现图像细节的增强和纹理的融合,输出质量更高的图像。
-
公开(公告)号:CN116164667A
公开(公告)日:2023-05-26
申请号:CN202310149511.9
申请日:2023-02-22
Applicant: 南京邮电大学
Abstract: 本发明属于三维测量技术领域,具体地说,是一种基于四目结构光的三维测量技术方法,包括搭建四目结构光三维测量系统,利用棋盘格标定板标定四相机的内、外部和畸变参数;获取互补格雷码加四步相移图像;通过投影仪设备将一系列的编码图像投影到被测物体上;对拍摄到的图像进行畸变校正并求解出绝对相位信息;根据解码值进行立体匹配;根据相机内部、外部参数求解出相应点的世界坐标,利用四直线方程求解物体点的世界坐标;最后再对生成的点云进行滤波去噪处理。本发明通过采用互补格雷码加相移的方式进行编解码,有效的解决了解码时的错码情况;同时通过引入四直线方程对求解物体点坐标时进行约束,使得物体的坐标信息更加准确,提高了测量精度。
-
公开(公告)号:CN114999006A
公开(公告)日:2022-09-02
申请号:CN202210560653.X
申请日:2022-05-20
Applicant: 南京邮电大学
IPC: G06V40/70 , G06V10/80 , G06V10/82 , G06V20/40 , G06V40/16 , G10L25/63 , G06V10/774 , G06N3/04 , G06V10/764
Abstract: 本发明提供一种基于不确定性估计的多模态情感分析方法、装置及设备,通过获取多模态情感分析数据集,进行特征提取得到对应的音频特征、视频特征和文本特征;得到表征后的音频特征、视频特征;将得到的表征后的音频特征、视频特征和文本特征分别输入各自的基于迪利克雷分布的不确定性估计模型,得到对应音频、视频和文本模态的迪利克雷分布与不确定性估计;得到情感分类结果与总体不确定性估计;得到训练后的基于迪利克雷分布的不确定性估计模型;模型输出得到的预测结果;本发明识别精度更高,具有更强的鲁棒性和更优的可解释性,且对计算资源要求低,对多模态数据进行分析耗时更短,更符合实际场景的需要。
-
公开(公告)号:CN114881885A
公开(公告)日:2022-08-09
申请号:CN202210572476.7
申请日:2022-05-25
Applicant: 南京邮电大学
Abstract: 本发明公开了一种基于解耦深度字典学习的图像去噪方法,首先对图像数据进行预处理,将输入的图像分解为结构图像和纹理图像;所述结构图像和纹理图像分别遵循字典学习模型去学习一个自适应的字典,对解耦深度字典学习模型求解,利用模型驱动的网络对处理完后的图像不同成分做融合;然后将经过预处理的图像输入神经网络模型进行参数训练,得到去噪效果较好的网络模型;最后将需要测试的图像输入到上述经过参数训练的网络模型中,得到清晰图像。本方法所形成的解耦深度字典学习图像去噪模型克服了当前主流方法中存在的模型退化严重、网络收敛慢、字典不自适应等问题,有效的利用了DNN的学习能力,使之在严重噪声环境下也能很好的恢复图像的细微结构。
-
公开(公告)号:CN114723623A
公开(公告)日:2022-07-08
申请号:CN202210233631.2
申请日:2022-03-09
Applicant: 南京邮电大学
Abstract: 本发明公开了一种基于层级网络的低分辨率鬼成像图像重建方法和装置,包括如下步骤:将初始图像通过仿真生成鬼成像图像;将需要重建的鬼成像图像作为输入,输入预先训练的多层次网络模型,多层级网络模型对需要重建的鬼成图像进行处理,并输出得到重建的清晰的图像;其中,多层次网络模型的构建包括:构建多层级网络,在每个层级的网络的编码器中均引入反馈连接;基于鬼成图像、鬼成图像对应的真值图像和perceptual loss函数进行训练,得到多层次网络模型。本发明与现有的基于深度学习的鬼成像重建方法相比,能够恢复出目标结构更加明确、边缘更加清晰的干净图像,解决了在低采样率下,鬼成像图像恢复不清晰、恢复速度较慢的问题。
-
公开(公告)号:CN111292308A
公开(公告)日:2020-06-16
申请号:CN202010085699.1
申请日:2020-02-11
Applicant: 南京邮电大学
Abstract: 本发明公开了无损检测技术领域的一种基于卷积神经网络的光伏太阳能板红外缺陷检测方法,旨在解决现有技术中利用卷积网络进行物体表面缺陷检测时,由于受数据集的质量、容量以及网络规模的限制,无法精确捕捉和保留图片内容信息、网络运行速度缓慢、影响缺陷检测效果的技术问题。所述方法包括如下步骤:将光伏太阳能板的红外图像输入预先训练好的U型全卷积神经网络,获取光伏太阳能板的缺陷检测结果。
-
公开(公告)号:CN111104876A
公开(公告)日:2020-05-05
申请号:CN201911224458.4
申请日:2019-12-04
Applicant: 南京邮电大学
Abstract: 本发明公开了信号处理技术领域的一种基于神经网络的红外光谱反卷积方法,旨在解决现有技术中由于非盲反卷积和半盲反卷积方法需要先验知识作为支撑,因而限制了其在红外光谱信号处理实际场景中的应用;全盲反卷积处理效果的准确性以及效率不佳,容易受到自然界中的随机噪声影响的技术问题。所述方法包括如下步骤:基于初始红外光谱信号及其退化红外光谱信号构建样本集;利用所述样本集对预构建的神经网络进行训练,所述神经网络的损失函数引入有自步正则项;利用训练好的神经网络处理目标红外光谱信号。
-
公开(公告)号:CN110443261A
公开(公告)日:2019-11-12
申请号:CN201910752068.8
申请日:2019-08-15
Applicant: 南京邮电大学
Abstract: 本发明公开了一种基于低秩张量恢复的多图匹配方法,包括如下步骤:S1:对各帧图像进行预处理并进行特征提取,即提取兴趣点特征;S2:对各帧图像的兴趣点进行处理,根据兴趣点的拓扑关系提取其高阶信息特征;S3:基于多图循环一致性,根据置换矩阵和图像特征的全局对应关系组建多图高阶特征信息张量;S4:采用秩约束作为标准,基于交替方向乘子法(ADMM)算法求解多图高阶特征信息张量的低秩表示,可以有效地计算出多个图像之间对应的最优置换矩阵即匹配结果矩阵。本发明提出基于低秩张量恢复的多图匹配方法,实现了图匹配一致性提高了匹配精度,其对图像匹配应用研究、目标识别和目标追踪技术具有重要的意义。
-
公开(公告)号:CN110415173A
公开(公告)日:2019-11-05
申请号:CN201910699617.X
申请日:2019-07-31
Applicant: 南京邮电大学
Abstract: 本发明公开了一种基于三维总变分的图像超分辨率方法,包括以下步骤:S1:输入低分辨率图像序列;S2:图像预处理步骤,对S1中的低分辨率图像进行插值预处理;S3:构建TV2++正则项;S4:构建指数型罚函数(Exponential-Type Penalty,ETP)非凸低秩正则项;S5:对所建算法模型进行优化求解,直到算法达到收敛阈值,输出高分辨率图像结果;S6:计算相关图像质量评价指标。本发明利用了图像的时间维信息,解决了现有方法中对时间维信息利用的不足,以及利用了非凸罚函数来替代范数,更有效的增强低秩矩阵恢复,从而进一步提高图像超分辨率重建的效果。
-
公开(公告)号:CN104616299B
公开(公告)日:2019-02-19
申请号:CN201510051773.7
申请日:2015-01-30
Applicant: 南京邮电大学
IPC: G06T7/00
Abstract: 本发明公开了一种基于空时偏微分方程的弱小目标检测方法,该方法包括:(1)读入待处理图像序列的相邻三帧图像;(2)初始化参数w并计算图像的空时梯度(3)利用空时偏微分方程对图像进行背景预测;(4)对当前帧的图像和背景预测的结果进行差分,得到弱小目标的检测结果。本发明通过利用空时偏微分方程模型对远距离红外图像进行背景预测,使得算法能够对弱小目标进行检测,该方法为成像制导、安全监控、空间监测等方面提供了技术支撑,具有较强的实用价值。
-
-
-
-
-
-
-
-
-