-
公开(公告)号:CN118379795B
公开(公告)日:2025-01-10
申请号:CN202410505439.3
申请日:2024-04-25
Applicant: 兰州理工大学
IPC: G06V40/20 , G06V10/762 , G06V10/764 , G06V10/82 , G06V10/25 , G06V10/34 , G06V10/44 , G06N3/045 , G06N3/042 , G06N3/0464 , G06N3/08
Abstract: 本发明公开了一种基于动态多模态时空图注意力网络的行为理解方法,包括:获取多通道音频信息并进行处理,构建全局注意力人工势场;获取多通道深度视频信息,并输入目标检测网络,获得四通道子图作为单目标的状态描述;将所述全局注意力人工势场和四通道子图进行外部特征更新;且利用HRNet网络和三维卷积网络对所述四通道子图进行处理,构建目标视向图并生成空间邻接矩阵;利用动态多模态时空图注意力网络进行处理,获得室内场景的多模态行为理解结果。该方案适用于各类室内场景不同目标行为理解需求,通过音视频融合与图神经网络充分考虑目标状态特征与群体环境特征,能够优化目标行为理解速度,更准确地理解室内场景中的多模态行为。
-
公开(公告)号:CN116863239A
公开(公告)日:2023-10-10
申请号:CN202310888587.3
申请日:2023-07-19
Applicant: 兰州理工大学
IPC: G06V10/764 , G06V10/774 , G06V10/82 , G06N3/0464
Abstract: 本发明公开了一种基于特征扩散模型的图像分类方法及装置,涉及图像分类技术领域。引入特征迁移和扩散模型的技术,将样本的深层卷积特征作为条件,深层特征在此基础上进行去噪,使得去噪后的特征与同类别样本的特征拥有较高的相似性。采用特征扩散的方式在基类数据下学习一个较好的特征提取器,提取高辨识度的视觉特征,生成更具判别性的特征,与此同时相比于原始的扩散模型算法,所需的数据量少,易于实现,且节省了大量的时间和计算资源成本。在测试阶段采用余弦距离衡量查询样本特征和去噪后的特征之间余弦相似性,进而对新类的查询样本进行分类,从而提升小样本图像分类的性能。
-
公开(公告)号:CN114943859B
公开(公告)日:2023-06-20
申请号:CN202210479781.1
申请日:2022-05-05
Applicant: 兰州理工大学
IPC: G06V10/764 , G06V10/774 , G06V10/82 , G06N3/0464
Abstract: 本发明公开了一种面向小样本图像分类的任务相关度量学习方法及装置,方法主要由数据预处理阶段、构建网络模型阶段、训练模型参数阶段和测试模型性能阶段组成,本发明通过考虑不同任务之间的差异性,引入注意力机制的思想,并学习任务相关的空间映射,利用任务自适应度量学习的方式,解决了小样本图像分类中存在的自适应度量学习问题,从而提高在小样本条件下目标任务分类的准确性,改善了图像的分类效果,具有很高的实用价值。
-
公开(公告)号:CN114782779B
公开(公告)日:2023-06-02
申请号:CN202210487387.2
申请日:2022-05-06
Applicant: 兰州理工大学
IPC: G06V10/774 , G06V10/764 , G06N20/00
Abstract: 本发明公开了一种基于特征分布迁移的小样本图像特征学习方法及装置,在前期利用基类的数据结合梯度下降的方法,对嵌入模块以及分布学习模块的参数进行优化,后期进行分布矫正时,并不需要额外的参数设置;另外,通常假设特征表示中的每个维度都遵循高斯分布,这样高斯分布的均值和方差可以在类似的类别之间传递,减少偏差,以便这些类别的统计数据在足够的样本数下得到更好的估计,再利用分布矫正模型,对样本的分布进行矫正,从而更为精准的对新类样本进行分类。同时可以与任何分类器和特征提取器配对,无需额外的参数,解决了小样本图像分类中存在的原型偏差问题,改善了图像的分类效果,具有很高的实用价值。
-
公开(公告)号:CN114943859A
公开(公告)日:2022-08-26
申请号:CN202210479781.1
申请日:2022-05-05
Applicant: 兰州理工大学
IPC: G06V10/764 , G06V10/774 , G06V10/82 , G06N3/04
Abstract: 本发明公开了一种面向小样本图像分类的任务相关度量学习方法及装置,方法主要由数据预处理阶段、构建网络模型阶段、训练模型参数阶段和测试模型性能阶段组成,本发明通过考虑不同任务之间的差异性,引入注意力机制的思想,并学习任务相关的空间映射,利用任务自适应度量学习的方式,解决了小样本图像分类中存在的自适应度量学习问题,从而提高在小样本条件下目标任务分类的准确性,改善了图像的分类效果,具有很高的实用价值。
-
公开(公告)号:CN114782752A
公开(公告)日:2022-07-22
申请号:CN202210487571.7
申请日:2022-05-06
Applicant: 兰州理工大学
IPC: G06V10/764 , G06V10/774 , G06V10/82 , G06K9/62 , G06N3/04 , G06N3/08
Abstract: 本发明公开了一种基于自训练的小样本图像集成分类方法及装置,通过迁移基类数据的卷积特征提取,使用查询样本进行基分类器的自训练,不断地将伪标签集加到支持集扩充支持集,并运用到下一次基分类器自训练中,提高了基分类器自训练结果的可靠性。自训练过程中产生的基分类器,不断通过模型平均得到集成分类器,经过多次迭代自训练和分类器集成过程,得到最终的集成分类器,通过构建损失函数,使得基分类器在查询样本上有确定的、不同的预测,实现了基分类器的不同,解决现有小样本分类方法中,基于特征迁移和查询样本自训练的小样本图像集成分类中基学习器的多样性问题,对于提升图像的分类效果非常显著,具有很高的使用价值。
-
公开(公告)号:CN118379795A
公开(公告)日:2024-07-23
申请号:CN202410505439.3
申请日:2024-04-25
Applicant: 兰州理工大学
IPC: G06V40/20 , G06V10/762 , G06V10/764 , G06V10/82 , G06V10/25 , G06V10/34 , G06V10/44 , G06N3/045 , G06N3/042 , G06N3/0464 , G06N3/08
Abstract: 本发明公开了一种基于动态多模态时空图注意力网络的行为理解方法,包括:获取多通道音频信息并进行处理,构建全局注意力人工势场;获取多通道深度视频信息,并输入目标检测网络,获得四通道子图作为单目标的状态描述;将所述全局注意力人工势场和四通道子图进行外部特征更新;且利用HRNet网络和三维卷积网络对所述四通道子图进行处理,构建目标视向图并生成空间邻接矩阵;利用动态多模态时空图注意力网络进行处理,获得室内场景的多模态行为理解结果。该方案适用于各类室内场景不同目标行为理解需求,通过音视频融合与图神经网络充分考虑目标状态特征与群体环境特征,能够优化目标行为理解速度,更准确地理解室内场景中的多模态行为。
-
公开(公告)号:CN114782752B
公开(公告)日:2023-09-05
申请号:CN202210487571.7
申请日:2022-05-06
Applicant: 兰州理工大学
IPC: G06V10/764 , G06V10/774 , G06V10/82 , G06N3/0895 , G06N3/096
Abstract: 本发明公开了一种基于自训练的小样本图像集成分类方法及装置,通过迁移基类数据的卷积特征提取,使用查询样本进行基分类器的自训练,不断地将伪标签集加到支持集扩充支持集,并运用到下一次基分类器自训练中,提高了基分类器自训练结果的可靠性。自训练过程中产生的基分类器,不断通过模型平均得到集成分类器,经过多次迭代自训练和分类器集成过程,得到最终的集成分类器,通过构建损失函数,使得基分类器在查询样本上有确定的、不同的预测,实现了基分类器的不同,解决现有小样本分类方法中,基于特征迁移和查询样本自训练的小样本图像集成分类中基学习器的多样性问题,对于提升图像的分类效果非常显著,具有很高的使用价值。
-
公开(公告)号:CN114723998B
公开(公告)日:2023-06-20
申请号:CN202210482490.8
申请日:2022-05-05
Applicant: 兰州理工大学
IPC: G06V10/764 , G06V10/82 , G06N3/0464 , G06N3/08 , G06N5/04
Abstract: 本发明公开了一种基于大边界贝叶斯原型学习的小样本图像分类方法及装置,方法包括以下步骤:S1、对数据进行预处理,其中数据包括训练集和测试集;S2、基于卷积神经网络和高斯分布模型,构建贝叶斯原型分布模型;S3、基于优化后的贝叶斯原型分布模型的目标函数并求解模型参数;S4、利用优化后的贝叶斯原型分布模型对测试集图像进行分类,测评模型的性能。本发明引入了大边界分类和变分推理的思想,基于分布估计建模的方式进行研究,建立了一种基于大边界贝叶斯原型学习的小样本图像分类方法及装置,解决了小样本图像分类中存在的原型偏差问题,改善了图像的分类效果,具有很高的实用价值。
-
公开(公告)号:CN115294381A
公开(公告)日:2022-11-04
申请号:CN202210487137.9
申请日:2022-05-06
Applicant: 兰州理工大学
IPC: G06V10/764 , G06V10/774 , G06V10/82 , G06N3/04 , G06N3/08
Abstract: 本发明公开了一种基于特征迁移和正交先验的小样本图像分类方法及装置,在基于深度度量的小样本图像分类研究基础上,研究高辨识度的特征提取的小样本分类框架。通过引入特征迁移和正交先验的小样本图像特征学习,假设新类和基类共享特征提取方式、并假设新类数据的不同类别的特征正交,通过构建一个正交化特征适应网络,来学习正交特征子空间,使得不同类特征彼此正交,从而提高的特征的辨识度。本发明对小样本学习的理论研究、推动机器识别技术的广泛应用具有非常重要的意义。同时,对我国率先突破小样本学习的理论瓶颈、掌握人工智能的先进技术将起到添砖加瓦的作用。
-
-
-
-
-
-
-
-
-