图像超分辨方法、图像超分辨装置、电子设备及存储介质

    公开(公告)号:CN117094888B

    公开(公告)日:2024-06-28

    申请号:CN202310957321.X

    申请日:2023-07-31

    Abstract: 本申请提供了一种图像超分辨方法、图像超分辨装置、电子设备及存储介质,通过将低分辨率图像输入至图像超分辨网络,图像超分辨网络包括生成器和判别器,生成器包括第一动态残差块和第二动态残差块,第一动态残差块和第二动态残差块之间存在第一预设时序信息,通过第一动态残差块对低分辨率图像进行特征提取,得到第一图像特征,将第一图像特征和第一预设时序信息进行特征融合,得到第二图像特征,通过第二动态残差块对第二图像特征进行特征提取,生成粗略的高分辨率图像,通过判别器对该粗略的高分辨率图像进行图像判别,若图像判别通过,则将该粗略的高分辨率图像作为图像超分辨网络输出的高分辨率图像,能够提高生成高分辨率图像的图像质量。

    一种基于多维度图像信息融合的垃圾图像去噪方法

    公开(公告)号:CN116543168A

    公开(公告)日:2023-08-04

    申请号:CN202310284080.7

    申请日:2023-03-22

    Abstract: 本发明提供了一种基于多维度图像信息融合的垃圾图像去噪方法,分别使用两个子网络对二维图像和三维图像进行互补信息提取,获取更多图像细节特征,引入动态自注意力模块削减二维图像噪声,其中动态卷积自适应地学习不同输入垃圾图像的动态噪声特征,并利用自注意力机制定位动态噪声特征中的显著性前景信息,抑制不重要背景信息;引入基于自适应稀疏机制的Transformer,对三维垃圾图像信息的远距离依赖关系进行建模,构建自适应稀疏机制。本发明克服卷积神经网络感受野局限性,降低Transformer自注意力运算量,通过二维与三维图像特征融合,能很好改善对垃圾图像去噪效果,提升后续垃圾分类、检测等任务的精确度。

    一种基于扩散模型的视频超分辨方法、系统、设备及介质

    公开(公告)号:CN119515683A

    公开(公告)日:2025-02-25

    申请号:CN202411478107.7

    申请日:2024-10-22

    Inventor: 田春伟 杨俊健

    Abstract: 本申请实施例提供了一种基于扩散模型的视频超分辨方法、系统、设备及介质,其中,一种基于扩散模型的视频超分辨方法包括:构建训练样本集,其中,所述训练样本集包括低分辨率样本视频以及低分辨率样本视频对应的高分辨率样本视频;构建初始扩散模型,其中,所述初始扩散模型包括编码器模块、时间嵌入模块、Unet网络模块和解码器模块;利用所述训练样本集对所述初始扩散模型进行多轮迭代训练,以获得目标扩散模型;利用所述目标扩散模型对待处理的低分辨率视频进行视频超分辨处理,得到高分辨率视频。通过在初始扩散模型中引入时间嵌入模块,实现了抑制扩散模型中图像生成过程的随机性和不确定性,使模型能学习到不同时间步长的视频帧特征的效果。

    图像超分辨方法、图像超分辨装置、电子设备及存储介质

    公开(公告)号:CN117094888A

    公开(公告)日:2023-11-21

    申请号:CN202310957321.X

    申请日:2023-07-31

    Abstract: 本申请提供了一种图像超分辨方法、图像超分辨装置、电子设备及存储介质,通过将低分辨率图像输入至图像超分辨网络,图像超分辨网络包括生成器和判别器,生成器包括第一动态残差块和第二动态残差块,第一动态残差块和第二动态残差块之间存在第一预设时序信息,通过第一动态残差块对低分辨率图像进行特征提取,得到第一图像特征,将第一图像特征和第一预设时序信息进行特征融合,得到第二图像特征,通过第二动态残差块对第二图像特征进行特征提取,生成粗略的高分辨率图像,通过判别器对该粗略的高分辨率图像进行图像判别,若图像判别通过,则将该粗略的高分辨率图像作为图像超分辨网络输出的高分辨率图像,能够提高生成高分辨率图像的图像质量。

    一种轻量级Transformer的垃圾图像超分辨方法及系统

    公开(公告)号:CN115936992A

    公开(公告)日:2023-04-07

    申请号:CN202211700428.8

    申请日:2022-12-28

    Abstract: 本发明公开了一种轻量级Transformer的垃圾图像超分辨方法及系统,轻量级Transformer块实现多尺度分层网络,获取不同程度的图像细节特征,提高图像的质量。并利用残差操作集成层次特征,提高浅层特征作用,获得更多的细节信息。先验知识转化块将先验信息加到不同尺度不同层获得的结构信息中,提高图像超分辨的鲁棒性。特征融合块根据生物技术中双目互补的思想,通过残差学习操作融合并行的先验知识转化块,提取互补的特征,提高预测图像的像素。最后通过一个卷积,重构高质量图像。本发明在改进垃圾图像超分辨效果的同时,降低了计算复杂度,实现了高效的轻量级超分辨网络,适用于垃圾图像的识别、分类等应用,在多种应用领域均有显著提升。

    基于知识蒸馏的轨道交通列车测速方法

    公开(公告)号:CN118072227B

    公开(公告)日:2024-07-05

    申请号:CN202410457964.2

    申请日:2024-04-17

    Abstract: 本发明属于视频理解技术领域,具体涉及基于知识蒸馏的轨道交通列车测速方法。本发明的方法将Transformer融合yolo使用多场景数据集先在教师神经网络上进行训练,再用不同的单一场景数据集单独训练参数量较小的学生神经网络,来解决Transformer需要计算量大实时性差的问题。考虑到数据集特点,本发明的方法还将蛇形卷积融合到yolo网络模型中来提高性能。本发明使用教师神经网络训练学生神经网络能使模型取得更好的泛化能力,消耗更少的训练时间,也能使模型取得更快的推理速度。除了能够处理固定视角的列车定位与测速,本发明的方法也能处理移动视角下的列车定位与测速,且具有较好的实时性。

Patent Agency Ranking