公开(公告)号：CN111339870A

公开(公告)日：2020-06-26

申请号：CN202010099358.X

申请日：2020-02-18

Applicant: 东南大学

Inventor： 王雁刚 ,  黄步真 ,  张天舒 ,  彭聪

IPC: G06K9/00 ,  G06K9/32 ,  G06K9/46 ,  G06K9/62

Abstract: 本发明公开了一种针对物体遮挡场景的人体形状和姿态估计方法,将计算得到的弱透视投影参数转换到相机坐标下，获得不带遮挡情况下包含人体形状信息的UV图像；对人体二维图像加入随机物体图片遮挡，并获取遮挡情况下的人体掩膜；将获得的虚拟遮挡数据训练编码-解码结构的UV贴图修复网络；输入真实物体遮挡人体彩色图像，以掩膜图像作为真值构建编码-解码结构的显著性检测网络；使用编码得到的隐空间特征监督人体编码网络训练；输入遮挡人体彩色图像，得到完整的UV图像；使用UV图像与人体三维模型的顶点对应关系恢复出遮挡情况下的人体三维模型。本发明将遮挡人体形状估计转化为二维UV贴图的图像修复问题，进而实现遮挡场景下人体的实时、动态重建。

公开(公告)号：CN111339870B

公开(公告)日：2022-04-26

申请号：CN202010099358.X

申请日：2020-02-18

Applicant: 东南大学

Inventor： 王雁刚 ,  黄步真 ,  张天舒 ,  彭聪

IPC: G06V40/20 ,  G06V40/10 ,  G06V10/25 ,  G06V10/56 ,  G06V10/774 ,  G06K9/62

Abstract: 本发明公开了一种针对物体遮挡场景的人体形状和姿态估计方法,将计算得到的弱透视投影参数转换到相机坐标下，获得不带遮挡情况下包含人体形状信息的UV图像；对人体二维图像加入随机物体图片遮挡，并获取遮挡情况下的人体掩膜；将获得的虚拟遮挡数据训练编码‑解码结构的UV贴图修复网络；输入真实物体遮挡人体彩色图像，以掩膜图像作为真值构建编码‑解码结构的显著性检测网络；使用编码得到的隐空间特征监督人体编码网络训练；输入遮挡人体彩色图像，得到完整的UV图像；使用UV图像与人体三维模型的顶点对应关系恢复出遮挡情况下的人体三维模型。本发明将遮挡人体形状估计转化为二维UV贴图的图像修复问题，进而实现遮挡场景下人体的实时、动态重建。