公开(公告)号：CN111127304A

公开(公告)日：2020-05-08

申请号：CN201811294026.6

申请日：2018-10-31

Applicant: 微软技术许可有限责任公司

Inventor： 廖菁 ,  袁路 ,  曹凯迪

IPC: G06T3/00 ,  G06K9/62 ,  G06N3/04 ,  G06N3/08

Abstract: 根据本公开的实现，提出了一种跨域图像转换方案。在该方案中，基于第一图像域中的第一图像和第二图像域中的第二图像来确定用于从第一图像域到第二图像域的几何变形的第一学习网络，第一图像域和所述第二图像域的图像具有不同的风格并且其中的对象相对彼此具有几何变形。对第二图像执行从第二到第一图像域的几何变形以生成中间图像，或对第一图像执行从第一到第二图像域的几何变形以生成中间图像。基于第一图像和从第二图像生成的中间图像或基于第二图像和从第一图像生成的中间图像，确定用于从第一图像域到第二图像域的风格变换的第二学习网络。通过该方案，用于跨域图像转换的学习网络的处理准确度能够提高并且复杂度降低。

公开(公告)号：CN110648375A

公开(公告)日：2020-01-03

申请号：CN201810706012.4

申请日：2018-06-26

Applicant: 微软技术许可有限责任公司

Inventor： 廖菁 ,  袁路 ,  陈冬冬 ,  贺明明

IPC: G06T11/00

Abstract: 根据本公开的实现，提出了一种图像彩色化方案。在该方案中确定灰度源图像和彩色参考图像呈现的内容之间的相似度，并使用学习网络，基于相似度确定灰度源图像对应的彩色目标图像。具体地，基于相似度确定灰度源图像中与彩色参考图像在内容上相似的第一组图块和在内容上不相似的第二组图块，基于彩色参考图像中与第一组图块对应的图块中的颜色，确定第一组图块的第一颜色，独立于彩色参考图像来确定第二组图块的第二颜色，以及基于第一颜色和第二颜色变换灰度源图像，以生成彩色目标图像。通过该方案，可以提供图像彩色化中的用户可控性和定制化效果。此外还无需严格要求彩色参考图像与灰度源图像之间的对应性，这使彩色化对参考图像的选择更鲁棒。

公开(公告)号：CN110049303A

公开(公告)日：2019-07-23

申请号：CN201810036211.9

申请日：2018-01-15

Applicant: 微软技术许可有限责任公司

Inventor： 袁路 ,  华刚 ,  廖菁 ,  陈冬冬

IPC: H04N13/106

Abstract: 根据本公开的实现，提出了一种立体图像的视觉风格化的方案。在该方案中，提取第一和第二源图像的第一和第二特征图。第一和第二源图像分别对应于立体图像的第一和第二视角。基于第一和第二源图像确定从第一源图像到第二源图像的第一单向视差。将第一特征图与第一变形特征图进行合并得到第一合并特征图。通过基于第一单向视差处理第一和第二特征图，来生成具有视觉风格的第一和第二目标图像。通过该方案，在执行视觉风格变换的同时，还考虑组成立体图像的两幅源图像之间的视差，从而维持由目标图像组成的立体图像中的立体效果。