-
公开(公告)号:CN111523410B
公开(公告)日:2022-08-26
申请号:CN202010273756.9
申请日:2020-04-09
Applicant: 哈尔滨工业大学
Abstract: 本发明是一种基于注意力机制的视频显著性目标检测方法。所述方法为通过静态卷积网络提取静态特征,对多帧的视频图像进行初步的空间上的特征提取;将提取到的特征送入到嵌入注意力机制的双向convLSTM模块,学习时空一致性特征的同时保持特征的结构和空间结构;在网络深层提取的特征中加入通道注意力CA模块,在网络浅层提取的不同尺度的特征中加入空间注意力SA模块;通过通道注意力CA模块指导空间注意力SA模块学习,生成检测结果,得到网络检测视频帧中的显著图像;根据生成的检测结果和真值计算损失函数,反向传递误差,更新网络参数。本发明在基于注意力机制的视频显著性目标检测方法为视频的显著性检测提供了一种新的思路。
-
公开(公告)号:CN112306951A
公开(公告)日:2021-02-02
申请号:CN202011252879.0
申请日:2020-11-11
Applicant: 哈尔滨工业大学
Abstract: 本发明是一种基于FPGA的CNN‑SVM资源高效型加速架构。本发明涉及嵌入式目标分类、检测技术领域,本发明所述架构包括处理器系统和可编程逻辑系统;所述CNN‑SVM流式架构加速器基于通用的加速算子结构,所述加速算子结构为多个乘累加MAC节点组成的二维阵列,该加速架构可以充分利用数据重用特性,并适用于CNN‑SVM混合算法中包括CNN,FC全连接层和SVM在内的不同类型的层。此外,加速架构中设计的通用算子的流水线间隔可以保持在单个时钟周期从而可以提高加速器的计算效率。
-
公开(公告)号:CN111523410A
公开(公告)日:2020-08-11
申请号:CN202010273756.9
申请日:2020-04-09
Applicant: 哈尔滨工业大学
Abstract: 本发明是一种基于注意力机制的视频显著性目标检测方法。所述方法为通过静态卷积网络提取静态特征,对多帧的视频图像进行初步的空间上的特征提取;将提取到的特征送入到嵌入注意力机制的双向convLSTM模块,学习时空一致性特征的同时保持特征的结构和空间结构;在网络深层提取的特征中加入通道注意力CA模块,在网络浅层提取的不同尺度的特征中加入空间注意力SA模块;通过通道注意力CA模块指导空间注意力SA模块学习,生成检测结果,得到网络检测视频帧中的显著图像;根据生成的检测结果和真值计算损失函数,反向传递误差,更新网络参数。本发明在基于注意力机制的视频显著性目标检测方法为视频的显著性检测提供了一种新的思路。
-
公开(公告)号:CN112306951B
公开(公告)日:2022-03-22
申请号:CN202011252879.0
申请日:2020-11-11
Applicant: 哈尔滨工业大学
Abstract: 本发明是一种基于FPGA的CNN‑SVM资源高效型加速架构。本发明涉及嵌入式目标分类、检测技术领域,本发明所述架构包括处理器系统和可编程逻辑系统;所述CNN‑SVM流式架构加速器基于通用的加速算子结构,所述加速算子结构为多个乘累加MAC节点组成的二维阵列,该加速架构可以充分利用数据重用特性,并适用于CNN‑SVM混合算法中包括CNN,FC全连接层和SVM在内的不同类型的层。此外,加速架构中设计的通用算子的流水线间隔可以保持在单个时钟周期从而可以提高加速器的计算效率。
-
-
-