公开(公告)号：CN117894072A

公开(公告)日：2024-04-16

申请号：CN202410070427.2

申请日：2024-01-17

Applicant: 北京邮电大学

Inventor： 齐梦实 ,  马华东 ,  刘荣帅

IPC: G06V40/20 ,  G06V40/10 ,  G06V10/98 ,  G06V10/26 ,  G06V10/32 ,  G06V10/25 ,  G06T17/00 ,  G06N3/0475 ,  G06V10/44 ,  G06N3/047 ,  G06N3/0464 ,  G06N3/045

Abstract: 本发明提供一种基于扩散模型的手部检测和三维姿态估计方法及系统，所述方法的步骤包括：将待检测图像输入到第一扩散模型中，第一扩散模型对待检测图像中的手部区域添加边界框；基于边界框对所述待检测图像进行裁剪，将裁剪图像输入到第二扩散模型中，第二扩散模型对在裁剪图像标记手部的第一关节点；基于第一关节点的位置确定手部的各个骨骼长度和各个骨骼的骨骼旋转角度；基于骨骼长度和骨骼的骨骼旋转角度确定每个第一关节点对应的轴角，计算每个第一关节点对应的旋转矩阵；基于每个第一关节点的关节路线，对该关节路线上的第一关节点对应的旋转矩阵进行计算，将第一关节点对应转化为第二关节点；基于所述第二关节点的坐标数据构建手部图像。

公开(公告)号：CN117894072B

公开(公告)日：2024-09-24

申请号：CN202410070427.2

申请日：2024-01-17

Applicant: 北京邮电大学

Inventor： 齐梦实 ,  马华东 ,  刘荣帅

IPC: G06V40/20 ,  G06V40/10 ,  G06V10/98 ,  G06V10/26 ,  G06V10/32 ,  G06V10/25 ,  G06T17/00 ,  G06N3/0475 ,  G06V10/44 ,  G06N3/047 ,  G06N3/0464 ,  G06N3/045

Abstract: 本发明提供一种基于扩散模型的手部检测和三维姿态估计方法及系统，所述方法的步骤包括：将待检测图像输入到第一扩散模型中，第一扩散模型对待检测图像中的手部区域添加边界框；基于边界框对所述待检测图像进行裁剪，将裁剪图像输入到第二扩散模型中，第二扩散模型对在裁剪图像标记手部的第一关节点；基于第一关节点的位置确定手部的各个骨骼长度和各个骨骼的骨骼旋转角度；基于骨骼长度和骨骼的骨骼旋转角度确定每个第一关节点对应的轴角，计算每个第一关节点对应的旋转矩阵；基于每个第一关节点的关节路线，对该关节路线上的第一关节点对应的旋转矩阵进行计算，将第一关节点对应转化为第二关节点；基于所述第二关节点的坐标数据构建手部图像。