基于弱监督学习的数据增强网络的细粒度车辆识别方法

    公开(公告)号:CN112257601A

    公开(公告)日:2021-01-22

    申请号:CN202011142413.5

    申请日:2020-10-22

    Applicant: 福州大学

    Inventor: 柯逍 蔡宇航

    Abstract: 本发明提出基于弱监督学习的数据增强网络的细粒度车辆识别方法,包括以下步骤;步骤S1:把细粒度车型数据集将其输入数据增强网络的主干网络,以获得车辆注意力图并计算部分注意力特征;步骤S2:进行图片数据增强,生成增强图像以扩充训练样本;步骤S3:计算原始图像和增强图像损失以及特征中心损失,以得到网络整体损失函数;步骤S4:过滤背景噪声,生成定位图输入数据增强网络,与原始图像获得的概率求均值得到最终细粒度车型预测结果;步骤S5:构建与颜色、角度、粗粒度车型相关的的多标签向量,将图片输入网络训练获得多标签分类器。输入汽车定位图得到汽车多标签预测结果;本发明能够准确有效地经图像识别来获取图片中的多种车辆信息。

    一种基于结构建模局部提议网络的细粒度分类方法

    公开(公告)号:CN115100476A

    公开(公告)日:2022-09-23

    申请号:CN202210787855.8

    申请日:2022-07-04

    Applicant: 福州大学

    Abstract: 本发明涉及一种基于结构建模局部提议网络的细粒度分类方法。首先获取细粒度分类数据集,输入主干网络,通过多粒度融合学习策略整合多粒度层级信息以增强特征表示,并计算跨层自蒸馏正则化损失。然后利用空间注意力模块增强判别性区域定位能力并以弱监督的形式生成区域提议,利用生成的局部区域提议裁剪原始图像,调整裁剪后的图像到指定大小得到局部区域图像,并将局部区域图像再次输入网络。然后基于空间注意力模块生成区域掩码,利用掩码进行极坐标建模,并计算结构建模损失,最后按照指定训练参数进行迭代训练,根据验证准确率不断保存最优模型,利用最终模型得到细粒度分类结果。

    基于模态特异自适应缩放与注意力网络的跨模态检索方法

    公开(公告)号:CN115080699A

    公开(公告)日:2022-09-20

    申请号:CN202210787446.8

    申请日:2022-07-04

    Applicant: 福州大学

    Abstract: 本发明涉及一种基于模态特异自适应缩放与注意力网络的跨模态检索方法。首先对图像模态采用带残差空间缩减的Transformer编码器,对文本模态采用单词级特征注意力模块,分别进行模态不变特征的提取。然后使用模态嵌入级特征注意力模块进行模态干扰特征的过滤。接着采用融合先验知识的自适应缩放网络将特征映射到一个多模态公共子空间进行模态公共特征学习。最后利用表现最好的网络权重计算新的待查询、待检索数据的多模态公共子空间特征,进行类别级重排序,返回最终的跨模态数据检索。本发明能够有效的对多模态数据进行建模,高效准确地完成多模态场景下的跨模态检索任务。

    基于任务特定通道重构网络的细粒度小样本分类方法

    公开(公告)号:CN116843970A

    公开(公告)日:2023-10-03

    申请号:CN202310807415.9

    申请日:2023-07-03

    Applicant: 福州大学

    Abstract: 本发明提供一种基于任务特定通道重构网络的细粒度小样本分类方法,首先获取细粒度小样本分类数据集进行数据预处理,并完成标签提取。将数据集划分为三个部分,按照episode模式进行N‑way K‑shot小样本元任务采样,得到查询集图像和N个类别的支持集图像。然后通过多维度动态卷积构建多维度动态特征提取网络,将所有支持集图像和查询集图像输入多维度动态特征提取网络中,分别得到各个类别的支持集和查询集的特征,计算支持集各个类别的原型特征。然后利用任务特定通道注意力权值重构支持集和查询集特征。最后利用距离度量进行相似度评分得到查询集图像所属类别,高效完成细粒度小样本分类任务。

    基于弱监督学习的数据增强网络的细粒度车辆识别方法

    公开(公告)号:CN112257601B

    公开(公告)日:2023-02-21

    申请号:CN202011142413.5

    申请日:2020-10-22

    Applicant: 福州大学

    Inventor: 柯逍 蔡宇航

    Abstract: 本发明提出基于弱监督学习的数据增强网络的细粒度车辆识别方法,包括以下步骤;步骤S1:把细粒度车型数据集将其输入数据增强网络的主干网络,以获得车辆注意力图并计算部分注意力特征;步骤S2:进行图片数据增强,生成增强图像以扩充训练样本;步骤S3:计算原始图像和增强图像损失以及特征中心损失,以得到网络整体损失函数;步骤S4:过滤背景噪声,生成定位图输入数据增强网络,与原始图像获得的概率求均值得到最终细粒度车型预测结果;步骤S5:构建与颜色、角度、粗粒度车型相关的的多标签向量,将图片输入网络训练获得多标签分类器。输入汽车定位图得到汽车多标签预测结果;本发明能够准确有效地经图像识别来获取图片中的多种车辆信息。

    一种面向深度学习的模型生成方法

    公开(公告)号:CN112162734B

    公开(公告)日:2022-03-08

    申请号:CN202011148399.X

    申请日:2020-10-23

    Applicant: 福州大学

    Abstract: 本发明提出集成化的机器学习算法库与统一编程框架(面向深度学习),为一种面向深度学习的模型生成方法,包括以下步骤;步骤S1:指定数据集,顺序组合不同深度学习框架下的数据预处理方法,形成数据预处理模块;步骤S2:选择网络优化器,并配置其参数,形成网络优化器模块;步骤S3:选择一种主体网络结构,所选网络结构可基于不同深度学习框架实现,并配置其训练参数,形成网络结构模块;步骤S4:拼接模型各部分模块,开始模型训练,在训练过程中不断保存最优模型,在结束后得到最终模型准确率;本发明能够克服传统深度学习系统的指定单一框架编程方式的缺点,方便深度学习的应用。

    集成化的机器学习算法库与统一编程框架(面向深度学习)

    公开(公告)号:CN112162734A

    公开(公告)日:2021-01-01

    申请号:CN202011148399.X

    申请日:2020-10-23

    Applicant: 福州大学

    Abstract: 本发明提出集成化的机器学习算法库与统一编程框架(面向深度学习),为一种面向深度学习的模型生成方法,包括以下步骤;步骤S1:指定数据集,顺序组合不同深度学习框架下的数据预处理方法,形成数据预处理模块;步骤S2:选择网络优化器,并配置其参数,形成网络优化器模块;步骤S3:选择一种主体网络结构,所选网络结构可基于不同深度学习框架实现,并配置其训练参数,形成网络结构模块;步骤S4:拼接模型各部分模块,开始模型训练,在训练过程中不断保存最优模型,在结束后得到最终模型准确率;本发明能够克服传统深度学习系统的指定单一框架编程方式的缺点,方便深度学习的应用。

    基于任务特定通道重构网络的细粒度小样本分类方法

    公开(公告)号:CN116843970B

    公开(公告)日:2025-05-09

    申请号:CN202310807415.9

    申请日:2023-07-03

    Applicant: 福州大学

    Abstract: 本发明提供一种基于任务特定通道重构网络的细粒度小样本分类方法,首先获取细粒度小样本分类数据集进行数据预处理,并完成标签提取。将数据集划分为三个部分,按照episode模式进行N‑way K‑shot小样本元任务采样,得到查询集图像和N个类别的支持集图像。然后通过多维度动态卷积构建多维度动态特征提取网络,将所有支持集图像和查询集图像输入多维度动态特征提取网络中,分别得到各个类别的支持集和查询集的特征,计算支持集各个类别的原型特征。然后利用任务特定通道注意力权值重构支持集和查询集特征。最后利用距离度量进行相似度评分得到查询集图像所属类别,高效完成细粒度小样本分类任务。

    一种基于结构建模局部提议网络的细粒度分类方法

    公开(公告)号:CN115100476B

    公开(公告)日:2024-07-26

    申请号:CN202210787855.8

    申请日:2022-07-04

    Applicant: 福州大学

    Abstract: 本发明涉及一种基于结构建模局部提议网络的细粒度分类方法。首先获取细粒度分类数据集,输入主干网络,通过多粒度融合学习策略整合多粒度层级信息以增强特征表示,并计算跨层自蒸馏正则化损失。然后利用空间注意力模块增强判别性区域定位能力并以弱监督的形式生成区域提议,利用生成的局部区域提议裁剪原始图像,调整裁剪后的图像到指定大小得到局部区域图像,并将局部区域图像再次输入网络。然后基于空间注意力模块生成区域掩码,利用掩码进行极坐标建模,并计算结构建模损失,最后按照指定训练参数进行迭代训练,根据验证准确率不断保存最优模型,利用最终模型得到细粒度分类结果。

    令牌压缩与双向非对称匹配的多模态查询图像检索方法

    公开(公告)号:CN116910287B

    公开(公告)日:2025-05-16

    申请号:CN202310867102.2

    申请日:2023-07-14

    Applicant: 福州大学

    Abstract: 本发明提出令牌压缩与双向非对称匹配的多模态查询图像检索方法,包括以下步骤;步骤S1:将输入图像分块并分别编码,将输入文本利用词嵌入转化为令牌序列;对序列化的数据进行令牌压缩与编码;步骤S2:对得到的融合上下文的图像模态和文本模态令牌序列加上额外的融合令牌,并再次进行令牌压缩与编码;步骤S3:对使用步骤S2得到的单模态与融合模态特征表示进行正向的精确匹配与反向的模糊匹配,利用匹配结果指导神经网络学习过程。步骤S4:进行神经网络的训练,保留最好的模型权重用于计算测试集数据的特征表示,实现组合查询图像检索;本发明能够对多模态查询语义进行充分融合,充分利用多模态数据的相关性和互补性实现更全面更精细的图像检索。

Patent Agency Ranking