公开(公告)号：CN114554205B

公开(公告)日：2023-03-10

申请号：CN202011353900.6

申请日：2020-11-26

Applicant: 华为技术有限公司 ,  北京大学

Inventor： 刘家瑛 ,  胡越予 ,  王晶

IPC: H04N19/13 ,  H04N19/61

Abstract: 提供一种图像编解码方法及装置，涉及图像编解码技术领域，能够减少神经网络的参数，能够降低图像编解码的算力消耗。该方法包括：使用第一分析网络对目标图像进行第一去相关变换，得到目标图像的第一特征图；且使用第二分析网络对第一特征图进行第二去相关变换，得到目标图像的第二特征图；然后基于第二特征图的第二概率直方图对第二特征图进行熵编码，获得目标图像的第二码流；并基于第二特征图的第二概率直方图和第二码流，获得目标图像的第二重建图；将第二重建图作为先验信息，使用第一概率预测网络对第一特征图进行概率预测，获得第一概率直方图；以及基于第一特征图的第一概率直方图对第一特征图进行熵编码，获得目标图像的第一码流。

公开(公告)号：CN110677644B

公开(公告)日：2021-11-16

申请号：CN201810713756.9

申请日：2018-07-03

Applicant: 北京大学

Inventor： 刘家瑛 ,  胡越予 ,  杨文瀚 ,  夏思烽

IPC: H04N19/103 ,  H04N19/176 ,  H04N19/573 ,  H04N19/70

Abstract: 本发明公开一种视频编码、解码方法及视频编码帧内预测器。本发明的预测器包括一循环神经网络，所述循环神经网络用于生成待编码块的预测值；其中，所述循环神经网络利用待编码块的参考块的像素值均值对该待编码块进行填充，产生一图像；然后将该图像映射到特征空间，并提取该图像的局部特征；然后利用所述局部特征对该待编码块的预测块进行填充，得到该待编码块的预测值。本发明通过块级参考像素的选取和端到端的预测方法提高了编码效率，增强了现有视频编码器的编码性能。

公开(公告)号：CN113132732A

公开(公告)日：2021-07-16

申请号：CN201911408329.0

申请日：2019-12-31

Applicant: 北京大学

Inventor： 刘家瑛 ,  段凌宇 ,  胡越予 ,  夏思烽 ,  杨文瀚

IPC: H04N19/187 ,  H04N19/30 ,  H04N19/44 ,  H04N19/146 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了一种人机协同的视频编码方法及视频编码系统。本方法为：1)对于一段待编码视频以及对应的关键点序列，编码器首先对关键点序列进行编码压缩，形成关键点序列码流；然后从待编码视频中选取一帧并编码，作为参考帧，形成参考帧码流；根据关键点序列和参考帧生成一预测视频；2)降低该待编码视频的分辨率；计算该真实低分率视频与预测视频信号之间的残差，根据各帧的残差组成一残差视频序列并将其编码成残差码流；3)编码器根据需求将码流选择性的传输到解码器；如果为机器视觉任务，则根据关键点码流重建得到关键点序列；如果需要重建视频序列，则根据三码流重建得到原分辨率视频。本发明根据应用需求，提供可伸缩的视频编码。

公开(公告)号：CN110324635B

公开(公告)日：2021-06-15

申请号：CN201810294119.2

申请日：2018-03-30

Applicant: 北京大学 ,  北大方正集团有限公司 ,  北京北大方正电子有限公司

Inventor： 刘家瑛 ,  夏思烽 ,  杨文瀚 ,  胡越予 ,  郭宗明

IPC: H04N19/523 ,  H04N19/59

Abstract: 本发明提供了一种分像素插值方法、系统、计算机设备和介质。其中，一种分像素插值方法，包括：对训练集中的每一张原始图像进行处理，得到整像素块和分像素块；将整像素块前向传播到卷积神经网络，得到分像素块的预测值；计算分像素块的预测值与分像素块的均方差；将均方差反向传播到卷积神经网络，以更新卷积神经网络各层的权值，循环迭代直至卷积神经网络收敛，得到分像素插值网络。通过本发明的技术方案，实现了通过单一网络即可插值出属于不同分像素位的参考块，并使得视频压缩的性能得到提升。

公开(公告)号：CN110677644A

公开(公告)日：2020-01-10

申请号：CN201810713756.9

申请日：2018-07-03

Applicant: 北京大学

Inventor： 刘家瑛 ,  胡越予 ,  杨文瀚 ,  夏思烽

IPC: H04N19/103 ,  H04N19/176 ,  H04N19/573 ,  H04N19/70

Abstract: 本发明公开一种视频编码、解码方法及视频编码帧内预测器。本发明的预测器包括一循环神经网络，所述循环神经网络用于生成待编码块的预测值；其中，所述循环神经网络利用待编码块的参考块的像素值均值对该待编码块进行填充，产生一图像；然后将该图像映射到特征空间，并提取该图像的局部特征；然后利用所述局部特征对该待编码块的预测块进行填充，得到该待编码块的预测值。本发明通过块级参考像素的选取和端到端的预测方法提高了编码效率，增强了现有视频编码器的编码性能。