公开(公告)号：CN119006530A

公开(公告)日：2024-11-22

申请号：CN202411492146.2

申请日：2024-10-24

Applicant: 南昌工程学院

Inventor： 王军 ,  刘纪龙 ,  谷庚 ,  司英振 ,  尉兴宇 ,  王员云

IPC: G06T7/246 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/0442 ,  G06N3/08 ,  G06V10/44 ,  G06V10/766 ,  G06V10/82 ,  G06V10/46

Abstract: 本发明提出基于频域块和高效查询注意力的目标跟踪方法与系统，该方法包括：将模板图像输入模板分支模块，通过快速傅里叶变换，再通过门控卷积进行筛选，随后进行逆快速傅里叶变换，得到更新后的模板令牌；将更新后的模板令牌通过高效查询注意力机制处理得到模板特征图；将搜索图像输入搜索分支模块，通过多头自注意力机制生成搜索特征图；将模板特征图与搜索特征图进行拼接再通过多头自注意力机制处理，得到拼接特征图；将拼接特征图输入预测头，根据输出结果对目标进行跟踪。本发明充分结合频域块和高效查询注意力的优势构建基于Transformer的多尺度特征提取网络，使得跟踪器可以实现更准确和鲁棒的跟踪。