公开(公告)号：CN118037778A

公开(公告)日：2024-05-14

申请号：CN202410227097.3

申请日：2024-02-29

Applicant: 上海海洋大学

Inventor： 张明华 ,  张秋阳 ,  宋巍 ,  郭伟其 ,  石少华 ,  梅海彬 ,  贺琪

IPC: G06T7/246 ,  G06V10/40 ,  G06V10/80 ,  G06V10/82 ,  G06N3/045 ,  G06N3/0464 ,  G06N3/0499 ,  G06N3/0495

Abstract: 本发明提供了一种基于模板提示的视频目标实时跟踪系统及方法，所述系统包括骨干网络、颈网络、多尺度层次Transformer网络以及预测头，所述骨干网络输出搜索区域特征、动态模板特征和初始模板特征给颈网络，所述颈网络包括动态模板提示器，将初始模板特征和动态模板特征输入到动态模板提示器，得到融合模板，所述多尺度层次Transformer从骨干网络和动态模板提示器的不同阶段获取输入，输出一个向量给预测头，所述预测头包含得分预测头和角点预测头，得分预测头对预测质量进行打分，如果得分超过设定的置信度阈值，并达到更新间隔，动态模板就会更新，角点预测头预测出物体在搜索区域的位置，实现跟踪。本发明方法精度更高，速度更快，适用于轻量级网络。