一种基于隐空间运动编码的多人人体模型重建方法

    公开(公告)号:CN113379904A

    公开(公告)日:2021-09-10

    申请号:CN202110758141.X

    申请日:2021-07-05

    Applicant: 东南大学

    Abstract: 本发明公开了一种基于隐空间运动编码的多人人体模型重建方法,具体包括步骤:S1.隐空间运动先验训练:S2.搭建多视角相机系统并采集多人体运动视频;S3.对步骤S2中搭建的多视角相机系统采集到的多人体运动视频使用现有开源二维姿态估计和跟踪进行预处理,获得二维关节点轨迹;S4.获取初始相机外参;S5.完成多人体运动视频中每个待重建人体的对齐;S6.迭代优化隐空间编码和步骤S4中获得的初始相机外参,使三维人体模型的关节点投影与步骤S3中得到的二维关节点轨迹一致,最后对每帧中的人体模型进行蒙皮后即可获得整个序列的人体重建结果。本发明降低了多人相互遮挡、跟踪误差对重建的影响。

    一种针对体育运动场景的多视角相机标定方法

    公开(公告)号:CN114842092B

    公开(公告)日:2024-12-20

    申请号:CN202210534979.5

    申请日:2022-05-17

    Applicant: 东南大学

    Abstract: 本发明公开了一种针对体育运动场景的多视角相机标定方法,包括以下步骤:搭建多视角相机系统,有效地拍摄体育场景中的人体关键点和场地关键点;采用针孔相机模型,并将相机参数化表示;分别给出场地和人体二维关键点与三维关键点的表示方法;构建关键点提取网络,监督训练关键点提取网络直至收敛;使用训练好的关键点提取网络对视频中二维场地关键点和二维人体关键点进行检测;利用静态场地语义初始化相机内外参数,结合静态场地语义和动态人体语义作为约束,对初始化后的相机内外参数和人体运动进行光束平差优化来获得准确的相机内外参数。本发明使用了场地关键点来初始化相机的内参和外参,具有更好的稳定性和准确性。

    一种基于隐空间运动编码的多人人体模型重建方法

    公开(公告)号:CN113379904B

    公开(公告)日:2022-02-15

    申请号:CN202110758141.X

    申请日:2021-07-05

    Applicant: 东南大学

    Abstract: 本发明公开了一种基于隐空间运动编码的多人人体模型重建方法,具体包括步骤:S1.隐空间运动先验训练:S2.搭建多视角相机系统并采集多人体运动视频;S3.对步骤S2中搭建的多视角相机系统采集到的多人体运动视频使用现有开源二维姿态估计和跟踪进行预处理,获得二维关节点轨迹;S4.获取初始相机外参;S5.完成多人体运动视频中每个待重建人体的对齐;S6.迭代优化隐空间编码和步骤S4中获得的初始相机外参,使三维人体模型的关节点投影与步骤S3中得到的二维关节点轨迹一致,最后对每帧中的人体模型进行蒙皮后即可获得整个序列的人体重建结果。本发明降低了多人相互遮挡、跟踪误差对重建的影响。

    基于自监督时空运动先验的单视角遮挡人体运动重建方法

    公开(公告)号:CN114926594A

    公开(公告)日:2022-08-19

    申请号:CN202210684494.4

    申请日:2022-06-17

    Applicant: 东南大学

    Abstract: 本发明提供了一种基于自监督时空运动先验的遮挡人体运动序列重建方法,包括以下步骤:S1.人体运动合成与表示;S2.遮挡人体时空先验网络构建;S3.遮挡人体时空先验网络训练;S4.三维运动重建网络构建;S5.三维运动重建网络训练;S6.全局位置估计;S7.实时单视角遮挡人体运动重建。本发明可以快速合成大量遮挡数据,且不影响模型在真实数据上的泛化能力,解决了现有方法对真实遮挡人体数据的强烈依赖。

    一种针对体育运动场景的多视角相机标定方法

    公开(公告)号:CN114842092A

    公开(公告)日:2022-08-02

    申请号:CN202210534979.5

    申请日:2022-05-17

    Applicant: 东南大学

    Abstract: 本发明公开了一种针对体育运动场景的多视角相机标定方法,包括以下步骤:搭建多视角相机系统,有效地拍摄体育场景中的人体关键点和场地关键点;采用针孔相机模型,并将相机参数化表示;分别给出场地和人体二维关键点与三维关键点的表示方法;构建关键点提取网络,监督训练关键点提取网络直至收敛;使用训练好的关键点提取网络对视频中二维场地关键点和二维人体关键点进行检测;利用静态场地语义初始化相机内外参数,结合静态场地语义和动态人体语义作为约束,对初始化后的相机内外参数和人体运动进行光束平差优化来获得准确的相机内外参数。本发明使用了场地关键点来初始化相机的内参和外参,具有更好的稳定性和准确性。

Patent Agency Ranking