公开(公告)号：CN119205513A

公开(公告)日：2024-12-27

申请号：CN202411586232.X

申请日：2024-11-08

Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)

Inventor： 王鑫 ,  徐勇

IPC: G06T3/4053 ,  G06T3/4046 ,  G06V10/80

Abstract: 本发明公开了一种视频超分辨率方法、系统、电子设备及存储介质，所述方法包括建立复杂运动场景下的视频超分辨率模型并训练和测试所述模型，模型包括特征提取子模块、跨帧对齐子模块、特征增强子模块和上采样重建子模块，特征提取子模块用于提取输入连续视频帧的浅层特征；跨帧对齐子模块利用可变形卷积对不同帧进行特征级对齐，实现跨帧的时空信息融合和运动补偿；特征增强子模块对特征进行增强；上采样重建子模块针对特征增强子模块输出的增强特征进行分辨率放大，并将分辨率放大后的增强特征重构为视频帧。本发明提高了复杂运动场景下视频的超分效果，增强视频的质量和视觉效果。

公开(公告)号：CN118799187B

公开(公告)日：2024-12-10

申请号：CN202411281438.1

申请日：2024-09-13

Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)

Inventor： 王鑫 ,  徐勇

IPC: G06T3/4053 ,  G06T3/4046 ,  G06V10/44 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/0985

Abstract: 本发明公开了一种全景图像超分辨率方法、系统、电子设备及存储介质，包括：建立基于纬度分级强化的全景图像超分辨率模型，模型包括特征提取子网、深度特征增强子网、上采样子网和重建子网，特征提取子网用于提取输入全景图片的浅层特征；深度特征增强子网通过级联的纬度分级强化单元，对不同纬度区域的浅层特征进行分等级的深度增强，基于全景图像中不同纬度区域特征分布的差异性，提炼不同纬度的高频信息，得到增强特征；上采样子网采用亚像素卷积层放大增强特征的空间分辨率尺寸；重建子网将放大后的增强特征复原成高分辨率全景图；本发明解决了全景图像中不同纬度特征分布的差异性难题，提高对不同场景环境下全景图像的超分效果。

公开(公告)号：CN118799187A

公开(公告)日：2024-10-18

申请号：CN202411281438.1

申请日：2024-09-13

Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)

Inventor： 王鑫 ,  徐勇

IPC: G06T3/4053 ,  G06T3/4046 ,  G06V10/44 ,  G06V10/82 ,  G06N3/0464 ,  G06N3/0985

Abstract: 本发明公开了一种全景图像超分辨率方法、系统、电子设备及存储介质，包括：建立基于纬度分级强化的全景图像超分辨率模型，模型包括特征提取子网、深度特征增强子网、上采样子网和重建子网，特征提取子网用于提取输入全景图片的浅层特征；深度特征增强子网通过级联的纬度分级强化单元，对不同纬度区域的浅层特征进行分等级的深度增强，基于全景图像中不同纬度区域特征分布的差异性，提炼不同纬度的高频信息，得到增强特征；上采样子网采用亚像素卷积层放大增强特征的空间分辨率尺寸；重建子网将放大后的增强特征复原成高分辨率全景图；本发明解决了全景图像中不同纬度特征分布的差异性难题，提高对不同场景环境下全景图像的超分效果。