公开(公告)号：CN116310695A

公开(公告)日：2023-06-23

申请号：CN202310393116.5

申请日：2023-04-13

Applicant: 杭州电子科技大学丽水研究院

Inventor： 颜成钢 ,  武松鹤 ,  周晓飞 ,  孙垚棋 ,  朱尊杰 ,  王帅 ,  高宇涵 ,  王鸿奎 ,  殷海兵 ,  张继勇 ,  李宗鹏 ,  赵治栋

IPC: G06V10/80 ,  G06V10/82 ,  G06V20/40 ,  G06N3/0442 ,  G06N3/0464 ,  G06N3/048 ,  G06N3/08

Abstract: 本发明公开了一种基于门控融合网络的视频显著性预测方法，首先构建门控融合网络；通过编码器提取视频片段包含的时空特征，用桥接模块增强顶层编码特征，再使用门控融合模块融合编解码特征，最后对门控融合特征进行解码处理，预测最终的显著图。本发明提出了一个门控融合模块用于将编码器的多级特征有效地融入到解码器中。该模块沿着时间、空间和通道维度加权编码特征，从而更加精准地定位显著对象的位置，并过滤掉特征中冗余的时空信息。