公开(公告)号：CN116343317A

公开(公告)日：2023-06-27

申请号：CN202310184342.2

申请日：2023-03-01

Applicant: 浙江大学

Inventor： 王朝 ,  于舒晴 ,  周朔雯 ,  周渝林 ,  李英明

IPC: G06V40/18 ,  G06V40/16 ,  G06V10/44 ,  G06V10/82 ,  G06N3/08 ,  G06N3/0464

Abstract: 本发明公开了一种基于视野分析的无约束注视估计方法，属于图像处理与模式识别领域。本发明使用混合Transformer结构提取特征，其中MHCA结构用于提取局部特征，E‑MHSA结构用于提取全局特征，混合模块以特定的方式融合MHCA和E‑MHSA来提高模型的整体建模能力，同时在融合MHCA和E‑MHSA时使用点卷积降低通道数量，以此降低计算成本。本发明首次将视野分析与视线检测相结合，二者相辅相成，视野分支的加入有效提升了视线检测的精度。本发明模型结构简单，不依赖于红外光源等特殊设备，只使用人脸图像作为输入，检测精度高，具有较大的应用前景。