公开(公告)号：CN114419102A

公开(公告)日：2022-04-29

申请号：CN202210086065.7

申请日：2022-01-25

Applicant: 江南大学

Inventor： 孔军 ,  莫恩森 ,  蒋敏

IPC: G06T7/246 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明涉及一种基于帧差时序运动信息的多目标跟踪检测方法、装置及计算机存储介质。探索了对连续视频帧间差的利用，利用帧间差带来的运动信息，实现弥补单帧输入的模型缺乏时序运动信息的缺点，本发明将骨干网络生成的多尺度特征图分为两类：浅层和深层特征图，并针对这两类特征图，提出了SADP和CADP这两种互补的相邻帧差处理方法，SADP通过从空间角度处理浅层特征图，实现对目标运动区域的信息提取，将运动信息补充在像素级别的特征图上，CADP通过从通道的角度处理深层特征图，实现对运动敏感通道信息的增强。最终本发明通过将这两个模块进行结合，共同处理相邻帧差，实现时序运动信息在空间与通道上的相互补充，增强模型对运动信息的感知与捕获。

公开(公告)号：CN114419102B

公开(公告)日：2023-06-06

申请号：CN202210086065.7

申请日：2022-01-25

Applicant: 江南大学

Inventor： 孔军 ,  莫恩森 ,  蒋敏

IPC: G06T7/246 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明涉及一种基于帧差时序运动信息的多目标跟踪检测方法、装置及计算机存储介质。探索了对连续视频帧间差的利用，利用帧间差带来的运动信息，实现弥补单帧输入的模型缺乏时序运动信息的缺点，本发明将骨干网络生成的多尺度特征图分为两类：浅层和深层特征图，并针对这两类特征图，提出了SADP和CADP这两种互补的相邻帧差处理方法，SADP通过从空间角度处理浅层特征图，实现对目标运动区域的信息提取，将运动信息补充在像素级别的特征图上，CADP通过从通道的角度处理深层特征图，实现对运动敏感通道信息的增强。最终本发明通过将这两个模块进行结合，共同处理相邻帧差，实现时序运动信息在空间与通道上的相互补充，增强模型对运动信息的感知与捕获。