公开(公告)号：CN117854009A

公开(公告)日：2024-04-09

申请号：CN202410126064.X

申请日：2024-01-29

Applicant: 南通大学

Inventor： 王进 ,  赵颖钏 ,  杨杨 ,  王可 ,  徐嘉玲 ,  吕泽

IPC: G06V20/52 ,  G06V10/82 ,  G06V10/80 ,  G06N3/0455 ,  G06N3/084 ,  G06V10/40

Abstract: 本发明公开了一种交叉协作融合的轻量化跨模态人群计数方法，本发明主要针对现有人群计数方法存在模型庞大，推理速度很慢两个问题，设计一种改进的人群计数方法。将RGB图像和热成像两种模态的图像经过预处理输入模型，首先为五层权重共享编码器提取特征，然后由跨策略增强编码器重新分配通道注意力，通过交叉注意力重新加权特征反应，将输出的三、四、五层特征扩大其感受野，并对其进行跨尺度跨模态解码，最后将特征总和经过回归器回归密度图生成预测人数，通过不断缩小与实际人数之间的差距，以提高人群计数的精度。