公开(公告)号：CN114494347A

公开(公告)日：2022-05-13

申请号：CN202210073470.5

申请日：2022-01-21

Applicant: 北京科技大学

Inventor： 姚超 ,  班晓娟 ,  杨金汩 ,  王笑琨 ,  孙金胜

IPC: G06T7/246 ,  G06V40/16 ,  G06V40/18 ,  G06V20/64 ,  G06V10/44 ,  G06V10/48 ,  G06V10/764 ,  G06V10/82 ,  G06K9/62 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明公开了单摄像头多模式视线追踪方法和装置、电子设备，属于人机交互技术领域，所述方法包括：通过注意力增强的自适应三维人脸对齐方法，将摄像头采集到的人脸信息进行对齐；标定人脸基准特征，并求解视线追踪过程中的人脸基准向量；采用三维人脸对齐结果，计算面部网格上多个关键点三角面的法向量；以三维人脸中心为起点表征基准投射向量，拟合视线转移矩阵，得到灵活头部在三维空间中的动态基准向量；建立待追踪用户的特异性信息；在持续的视线交互过程中，利用霍夫变换取得突出边缘的去噪图像中的人眼虹膜数据；依据人眼虹膜数据和人脸基向量，确定眼动参考向量，完成视线追踪，能够提升视线追踪的时效性且对硬件设备依赖性弱。