公开(公告)号：CN115456884A

公开(公告)日：2022-12-09

申请号：CN202210578520.5

申请日：2022-05-25

Applicant: 之江实验室 ,  中国科学院信息工程研究所

Inventor： 朱世强 ,  李特 ,  操晓春 ,  罗君 ,  任文琦

IPC: G06T5/00 ,  G06N3/08 ,  G06N3/04

Abstract: 本发明公开了一种基于半监督学习的全面屏手机图像增强方法，其步骤包括：1)选取或构建一数据集，所述数据集中的每一图像数据对包括由覆盖透明玻璃和不覆盖透明玻璃的同一部智能手机对同一场景所拍摄的图像；2)构建一图像增强模型；3)采用有监督方式利用所述数据集训练所述图像增强模型：首先对低质量图像y进行增强得到增强图像Y’，然后与高质量图像Y进行损失函数计算，优化图像增强模型；4)采用无监督方式利用数据集训练图像增强模型：首先利用优化后的模型对图像y进行增强得到Y’，然后基于Y’计算损失优化模型；5)利用优化后的图像增强模型对全面屏手机拍摄图像的色调和饱和度通道进行迭代增强，得到对应的高质量的图像。

公开(公告)号：CN113034370A

公开(公告)日：2021-06-25

申请号：CN202110580583.X

申请日：2021-05-26

Applicant: 之江实验室

Inventor： 朱世强 ,  李特 ,  操晓春 ,  胡晓彬 ,  沈若邻 ,  任文琦

IPC: G06T3/40 ,  G06T15/00 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了一种结合3D脸部结构先验的人脸超分辨方法，该方法能够显式得结合3D脸部先验，抓取到高清的脸部结构信息，为网络提供一些基于脸部属性的3D拓扑信息，例如身份、表情、纹理、亮度和脸部姿态。本发明提出了一个深度学习网络框架，框架总体包括两个分支：上半部分分支包含一个ResNet‑50网络来从输入图像中挖掘人脸3D信息，并将其结合重建成一个脸部渲染结构；下半部分分支利用空域特征转换层，结合3D信息及脸部渲染结构作为3D先验，利用空间注意力机制及通道注意力机制实现脸部超分辨；这种先验能够嵌入任何网络，而且十分有效的提高性能，加速收敛。

公开(公告)号：CN112396063A

公开(公告)日：2021-02-23

申请号：CN202011415482.9

申请日：2020-12-07

Applicant: 之江实验室

Inventor： 鲍虎军 ,  李特 ,  操晓春 ,  张三义 ,  任文琦

IPC: G06K9/34 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了一种聚集激励上下文金字塔的人像语义解析方法，该方法中采用由多个并行的不同空间幅度比率聚集激励单元组成聚集激励上下文金字塔模块对编码模块提取高级语义特征捕捉丰富的多尺度上下文信息。再将得到的高层语义上下文特征与编码模块中的输出特征相结合通过解码模块得到初步人像语义解析结果。最后，检测输入人像图片的边缘信息并与初步人像语义解析结果融合进一步改善得到最终的人像语义解析结果。同时引入深度辅助损失分支，辅助获取更佳的效果。本发明采用聚集激励上下文金字塔人像语义解析方法，相比于其他当前先进的人像语义解析算法，构建的模型是轻量的，但拥有很高的分割性能。