一种多模态融合头部姿态估计方法及装置

    公开(公告)号:CN118072369A

    公开(公告)日:2024-05-24

    申请号:CN202311376523.1

    申请日:2023-10-23

    Abstract: 本发明公开了一种多模态融合头部姿态估计方法及装置,该方法结合了RGB和点云两种数据模态进行头部姿态估计,充分利用了RGB图像的纹理信息和点云的几何信息,相互补充,提高了头部姿态估计的精度和鲁棒性;在特征融合阶段,引入了基于局部点云的融合思想,将局部点云特征与图像特征进行融合,提高了特征的多样性和表达能力;在局部点云融合阶段,采用了基于局部评分的策略,使局部之间产生竞争,竞争使每个局部区域提升融合质量,最后选择最佳的头部姿态预测结果,进一步提高了头部姿态估计的准确性。

Patent Agency Ranking