公开(公告)号：CN113470182B

公开(公告)日：2022-02-18

申请号：CN202111029442.5

申请日：2021-09-03

Applicant: 中科计算技术创新研究院

Inventor： 高林 ,  陈姝宇 ,  姜悦人

IPC: G06T17/20 ,  G06T19/20 ,  G06T7/11 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明涉及一种人脸几何特征编辑方法及深度人脸重塑编辑方法，为：获取几何基础人脸图像，从几何基础人脸图像上检测出人脸关键点；根据几何基础人脸图像上五官位置将人脸关键点连接成网格，将网格输入图卷积变分自动编码器进行编码；图卷积变分自动编码器在人脸数据集上针对人脸关键点训练而成，将自然人脸脸型参数化，使其隐空间的特征能解码出自然光滑且符合人脸几何特征的人脸关键点；获取人脸关键点中用户确定的不动点和经用户拖动的拖动点，图卷积变分自动编码器根据拖动点拖动前后坐标差和不动点位置优化人脸关键点中其余点位置和人脸关键点连接成的网格；将优化出的网格渲染成人脸几何特征图。本发明适用于计算机视觉、计算机图形学领域。

公开(公告)号：CN113706714A

公开(公告)日：2021-11-26

申请号：CN202111033534.0

申请日：2021-09-03

Applicant: 中科计算技术创新研究院

Inventor： 高林 ,  袁宇杰 ,  黄熠华

IPC: G06T17/20 ,  G06T15/00 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明涉及一种基于深度图像和神经辐射场的新视角合成方法。适用于计算机图形学以及深度学习领域。本发明的技术方案为：一种基于深度图像和神经辐射场的新视角合成方法，其特征在于：获取场景多个视角的真实RGB‑D图像；基于场景多个视角的RGB‑D图像生成该场景完整的场景彩色点云，场景彩色点云中每个点的颜色值与RGB‑D图像相应位置的颜色对应；基于场景完整的场景彩色点云生成该场景带颜色的三角网格表示；渲染带颜色的三角网格表示生成大量渲染图像；利用渲染图像作为网络真值预训练神经辐射场网络；利用所述RGB‑D图像对应的真实RGB图像作为网络真值继续训练所述神经辐射场网络；通过经渲染图像和RGB图像训练的神经辐射场网络生成指定新视角的图像。