公开(公告)号：CN112351279B

公开(公告)日：2023-07-28

申请号：CN202011152367.7

申请日：2020-10-26

Applicant: 杭州电子科技大学

Inventor： 陆宇 ,  毛翔田 ,  黄晓峰 ,  周洋 ,  杨萌 ,  殷海兵

IPC: H04N19/14 ,  H04N19/61 ,  H04N19/177 ,  H04N19/103

Abstract: 本发明公开了一种面向HEVC快速编码的自适应复杂度调整系统及方法。本发明首先结合离线训练模块和在线训练模块，确定在给定编码树单元(CTU)的目标编码时间时启用的预测模式以及跳过的模式；然后使用复杂度分配模块，利用第3个图片组(GOP)的编码时间来预测整个序列的编码时间，从而估算出当前给定目标复杂度下所需控制的序列目标编码时间，并将目标编码时间以分层的方式分配到CTU层级；在模式选择模块中，根据分配到每个CTU的目标编码时间选择启用的预测模式，然后开始编码，跳过未启用的模式；最后复杂度更新模块周期性地取一帧作标准编码，用于更新序列的目标编码时间和调整下一帧的目标编码时间。本发明充分利用视频编码的特点将实际的编码复杂度自适应地调整在目标复杂度附近，并尽可能减少失真。

公开(公告)号：CN115426535A

公开(公告)日：2022-12-02

申请号：CN202211065539.6

申请日：2022-09-01

Applicant: 杭州电子科技大学

Inventor： 林坤 ,  周洋 ,  蔡毛毛 ,  殷海兵 ,  陈平安 ,  黄晓峰 ,  俞定国 ,  杨阳

IPC: H04N21/81 ,  H04N13/117 ,  H04N13/128 ,  H04N13/15 ,  H04N13/161 ,  H04N13/366

Abstract: 本发明方法公开了基于背景分离的RGB‑D视频合成视点空洞掩盖方法。本发明方法以参考彩色图、参考深度图和相机信息为单位，利用加入并行注意力的P‑UNet网络分离彩色图前景、根据参考深度图前景与背景之间的像素突变分离前景，将两种方法的背景结合并使用高斯混合模型构建更干净的背景；使用基于深度和时间一致性的修复方法修复背景；然后根据3D变换公式和相机信息绘制出虚拟视点和虚拟背景，并再次修复虚拟背景；最后使用虚拟背景填充虚拟视点空洞中的缺失像素。本发明避免了修复时产生前景渗透，生成的空洞区域在相邻帧之间更有时间一致性，减少视频播放时的帧闪，提高了视觉质量。

公开(公告)号：CN112995672B

公开(公告)日：2022-11-18

申请号：CN202110153835.0

申请日：2021-02-04

Applicant: 杭州电子科技大学

Inventor： 查攀 ,  殷海兵 ,  周洋

IPC: H04N19/192

Abstract: 本发明公开了一种基于参数选择的视频编码算法优化方法，包括：S1，通过R‑D‑T综合性能评价指标，将率失真性能和编码复杂度进行综合分析；S2，分析参数间的相关性，定量计算参数的耦合系数，根据耦合系数对参数进行排序；S3，通过参数选择算法，在第一个循环中，获得一组最优参数组合；第二个循环在第一个循环的基础上加入编码时间限制，基于同一个参数的取值越小，则编码时间越短的规律，在第一个循环得到的最优参数组合的基础上，通过实际编码时间与目标编码时间对比来确定增大或减小参数取值，比较不同参数调整后的RDTscore，从而找出综合性能最好的参数作为本轮参数调整的对象，直到在误差允许的范围内达到目标复杂度。

公开(公告)号：CN111405265B

公开(公告)日：2021-09-17

申请号：CN202010214373.4

申请日：2020-03-24

Applicant: 杭州电子科技大学

Inventor： 张博文 ,  周洋 ,  梁文青 ,  崔金鹏 ,  陆宇 ,  殷海兵

IPC: H04N13/122 ,  H04N13/275

Abstract: 本发明公开了一种新型的图像绘制技术，包括以下步骤：3D图像变换；利用图像之间的深度差值来划分绘制不准确区域；设置图像的前景阈值和背景阈值；处理空洞。上述技术方案利用图像之间的深度差值来划分绘制不准确区域，根据图像的实际情况将图像中视觉冲击最明显的区域中的破损区域重新进行绘制，从而让图像的绘制区域变得更加清晰，减少最后一步填充空洞时空洞的个数，从而降低时间复杂度。

公开(公告)号：CN113179396A

公开(公告)日：2021-07-27

申请号：CN202110295931.9

申请日：2021-03-19

Applicant: 杭州电子科技大学

Inventor： 周洋 ,  张博文 ,  崔金鹏 ,  梁文青 ,  殷海兵 ,  陆宇 ,  黄晓峰

IPC: H04N13/279 ,  H04N13/106 ,  H04N13/156 ,  H04N13/15 ,  G06T7/194 ,  G06T5/50 ,  G06T5/00 ,  G06K9/62

Abstract: 本发明方法公开了基于K‑means模型的双视点立体视频融合方法。本发明方法首先对左、右视点深度图进行预处理，得到左、右视点深度图像；然后分别对左、右视点深度图像运用K‑means方法进行分割，对分割后的前景和背景区域深度图像进行三维投射运算，得到左、右视点的前景和背景绘制图像；以前景绘制图像为蓝本，用背景绘制图像填充前景绘制图像的空缺区域，将填充后的左、右视点绘制图像进行图像融合，获得虚拟视点绘制图像；最后将虚拟视点绘制图像的空洞区域根据空洞周围的像素信息进行加权填充，获得最终输出图像。本发明方法采用像素级别的操作，对空洞区域进行精准处理，使绘制效果在视觉效果上更加优质，更加协和。

公开(公告)号：CN112738501A

公开(公告)日：2021-04-30

申请号：CN202011592782.4

申请日：2020-12-29

Applicant: 杭州电子科技大学

Inventor： 徐岩 ,  周洋 ,  任建凯 ,  陈平安 ,  陆宇 ,  殷海兵 ,  黄晓峰

IPC: H04N17/00 ,  H04N13/106

Abstract: 本发明公开了一种立体图像舒适度测试方法。传统的舒适度测试技术提取的特征较为简单，预测结果不够准确。本发明方法首先输入立体图像视差图提取基础视差特征，然后由视差图和中颞区皮层图提取视觉神经活动特征，再与颜色特征线性结合得到最终的舒适度预测特征，采用随机森林回归模型进行不舒适度测试，获得最终的立体视觉不舒适度分值。本发明的视觉神经活动特征模拟了大脑中颞区皮层视觉处理过程，视差特征和颜色特征则代表了图像内容本身。本发明方法充分考虑了影响立体图像舒适度的相关因素，在舒适度测试方面有很好的效果。

公开(公告)号：CN112085683A

公开(公告)日：2020-12-15

申请号：CN202010816235.3

申请日：2020-08-14

Applicant: 杭州电子科技大学

Inventor： 徐岩 ,  周洋 ,  任建凯 ,  殷海兵 ,  陆宇 ,  黄晓峰

IPC: G06T5/20 ,  G06T5/00 ,  G06K9/62 ,  G06T7/13 ,  G06T7/50 ,  G06T7/90

Abstract: 本发明公开了一种显著性检测中的深度图可信度检测方法。该方法具体包括以下步骤：判断待测深度图像的收敛性；B)对收敛的深度图像做中值滤波处理；C)对中值滤波处理后的深度图像及其参考图像进行边缘检测，并获取边缘信息；D)计算深度图像及其参考图像的边缘的相似度，获得可信度分数。该方法引入图像收敛性概念，过滤显著物体不明显的深度图像，在提取边缘特征前进行中值滤波处理，通过自适应阈值的边缘检测，在像素级别上求取深度图像和参考图像的相似度，使深度图像显著物体的边缘定位更准确，不会受到边缘附近区块因失真等原因导致的数值变化的影响，获得的深度图像的可信度结果更为准确。

公开(公告)号：CN108924568B

公开(公告)日：2020-11-06

申请号：CN201810558850.1

申请日：2018-06-01

Applicant: 杭州电子科技大学

Inventor： 周洋 ,  吴佳忆 ,  周辉 ,  谢菲

IPC: H04N19/65 ,  H04N19/597 ,  H04N19/176 ,  H04N19/137 ,  H04N19/513 ,  H04N13/161 ,  H04N13/194

Abstract: 本发明涉及一种基于3D‑HEVC框架的深度视频错误隐藏方法。目前还缺乏在错误发生在深度图的情况下，通过错误隐藏方法改进图像最终质量的有效方法。本发明方法先把深度图中各64×64大小的编码单元块进行分类，划分成静止块和运动块，然后对静止块采用从参考帧直接拷贝同位块进行错误隐藏，对运动块采用矢量补偿的方法进行错误隐藏，最后对错误隐藏后性能不佳的错误修复块进行进一步性能优化。矢量补偿方法具体是：首先构建运动共享矢量、空域矢量集，然后计算全局视差矢量集，重建丢失块，最后计算外边界匹配度。本发明方法结合了新标准的特性并改进了已有错误隐藏方法，对立体视频在网络传输中发生的网络丢包现象有很好的恢复效果。

公开(公告)号：CN111225217A

公开(公告)日：2020-06-02

申请号：CN201911296384.5

申请日：2019-12-16

Applicant: 杭州电子科技大学

Inventor： 周洋 ,  崔金鹏 ,  梁文青 ,  张博文

IPC: H04N19/895 ,  H04N19/597

Abstract: 本发明提出一种基于虚拟视点绘制的3D-HEVC错误隐藏方法，包括以下步骤：S1、彩色图补偿，对丢失的整帧彩色图像进行绘制并生成绘制视点，由于绘制视图中存在遮挡块和失真，根据当前视点和绘制视点的前后向参考帧的信息，对绘制的彩色图进行补偿；S2、判定遮挡块及进行局部填充，提取补偿后的彩色图仍然存在较小的遮挡块，并进行局部填充。本发明突破了视差矢量的局限性，在不使用视差矢量的情况下，改进了虚拟视点绘制产生遮挡块的判别和填充方式，在提高错误隐藏准确率的同时，降低了总体复杂度，更好的消除遮挡块和图像失真。

公开(公告)号：CN107682705B

公开(公告)日：2020-05-12

申请号：CN201710881865.7

申请日：2017-09-26

Applicant: 杭州电子科技大学

Inventor： 周洋 ,  唐杰 ,  吴佳亿 ,  刘晓琪

IPC: H04N19/65 ,  H04N19/176 ,  H04N19/895 ,  H04N19/513

Abstract: 本发明涉及一种基于MV‑HEVC框架的立体视频B帧错误隐藏方法。传统的错误隐藏技术对于新标准MV‑HEVC并不能很好的适应。本发明方法首先对立体视频中的丢失块类型进行划分，将丢失块划分为静止块和运动块，然后对不同的丢失块类型采用不同的恢复方式，静止块选择直接拷贝的方式，对运动块选择运动或视差补偿的恢复方式。本发明方法结合了新标准的特性并改进了已有错误隐藏方法，能解决在HEVC立体视频扩展标准MV‑HEVC下没有相应的立体视频错误隐藏恢复技术，以及先前H.264标准下的错误隐藏技术不能直接使用在HEVC标准中的不足，对立体视频在网络传输中发生的网络丢包现象有很好的恢复效果。