公开(公告)号：CN115834922B

公开(公告)日：2025-01-07

申请号：CN202211648794.3

申请日：2022-12-20

Applicant: 南京大学

Inventor： 戴海鹏 ,  王蔚峻 ,  厉泉宏 ,  米良

IPC: H04N21/234 ,  H04N21/2343 ,  H04N19/503 ,  H04N7/18

Abstract: 本发明公开了一种面向实时视频分析的画面增强型解码方法，包括如下步骤：视频码流通过网络传输到服务器后由调度器将所有帧分成三类，每个类别执行三个管道中的一个。三个管道包括1.利用超分辨率模型将一组低分辨率锚点帧增强为高分辨率帧后输入推理模型；2.利用码流信息(如帧参考关系、运动向量和残差)将锚点帧的增益扩散到非锚点帧上并将所述非锚点帧输入推理模型；3.利用码流信息运动向量将推理模型的结果复用到未推理帧上。调度器利用从关键帧提取的画面特征和从码流信息中提取的帧差异特征进行合理的帧分类；画面增强提升了视频分析的推理精度，而码流信息的使用避免了对整个视频进行逐帧画面增强和推理，降低了时延。

公开(公告)号：CN115834922A

公开(公告)日：2023-03-21

申请号：CN202211648794.3

申请日：2022-12-20

Applicant: 南京大学

Inventor： 戴海鹏 ,  王蔚峻 ,  厉泉宏 ,  米良

IPC: H04N21/234 ,  H04N21/2343 ,  H04N19/503 ,  H04N7/18

Abstract: 本发明公开了一种面向实时视频分析的画面增强型解码方法，包括如下步骤：视频码流通过网络传输到服务器后由调度器将所有帧分成三类，每个类别执行三个管道中的一个。三个管道包括1.利用超分辨率模型将一组低分辨率锚点帧增强为高分辨率帧后输入推理模型；2.利用码流信息(如帧参考关系、运动向量和残差)将锚点帧的增益扩散到非锚点帧上并将所述非锚点帧输入推理模型；3.利用码流信息运动向量将推理模型的结果复用到未推理帧上。调度器利用从关键帧提取的画面特征和从码流信息中提取的帧差异特征进行合理的帧分类；画面增强提升了视频分析的推理精度，而码流信息的使用避免了对整个视频进行逐帧画面增强和推理，降低了时延。