一种基于超分模型的高清视频生成方法及系统

    公开(公告)号:CN116527833A

    公开(公告)日:2023-08-01

    申请号:CN202310801627.6

    申请日:2023-07-03

    Abstract: 本发明涉及视频处理技术领域,提供了一种基于超分模型的高清视频生成方法及系统,包括:获取高清关键帧和低分辨率视频流,进行特征提取并输入至超分模型;通过网格传播的方式对提取的特征进行传播,将参考帧特征进行光流扭曲后传播至中心帧;通过光流引导的可变形卷积方法将参考帧与中心进行对齐;在参考帧与中心帧对齐后进行特征拼接,经过连续的多个残差块完成特征融合;基于融合后的特征通过注意力过滤器获取最终的特征映射,通过像素洗牌层进行上采样从而得到重建的高清帧,输出高清视频。本发明解决了现有高清视频生成质量差、速度慢的问题。

    一种基于超分模型的高清视频生成方法及系统

    公开(公告)号:CN116527833B

    公开(公告)日:2023-09-05

    申请号:CN202310801627.6

    申请日:2023-07-03

    Abstract: 本发明涉及视频处理技术领域,提供了一种基于超分模型的高清视频生成方法及系统,包括:获取高清关键帧和低分辨率视频流,进行特征提取并输入至超分模型;通过网格传播的方式对提取的特征进行传播,将参考帧特征进行光流扭曲后传播至中心帧;通过光流引导的可变形卷积方法将参考帧与中心进行对齐;在参考帧与中心帧对齐后进行特征拼接,经过连续的多个残差块完成特征融合;基于融合后的特征通过注意力过滤器获取最终的特征映射,通过像素洗牌层进行上采样从而得到重建的高清帧,输出高清视频。本发明解决了现有高清视频生成质量差、速度慢的问题。

    基于语义增强的HEVC编码方法和装置

    公开(公告)号:CN118764644A

    公开(公告)日:2024-10-11

    申请号:CN202410972632.8

    申请日:2024-07-19

    Applicant: 清华大学

    Abstract: 本发明提供一种基于语义增强的HEVC编码方法和装置,包括:获取原始编码和待编码视频;将所述待编码视频的图像帧依次输入至预先训练的CTU分割结果预测模型,得到CTU分割预测结果;根据所述原始编码对所述待编码视频进行编码;根据所述CTU分割预测结果执行所述编码过程中的率失真优化过程,得到目标编码;其中,所述CTU分割结果预测模型是基于深度神经网络利用海量视频文件样本训练得到的。本发明使用深度神经网络提取语义信息以预测CTU分割结果,根据神经网络的预测结果优化率失真优化遍历过程,从而优化编码方法,在不改变编码性能的同时节约编码时间。同时由于本发明与现有代码进行了结合,节约了部署成本。

Patent Agency Ranking