公开(公告)号：CN118736309A

公开(公告)日：2024-10-01

申请号：CN202410870342.2

申请日：2024-07-01

Applicant: 上海工程技术大学

Inventor： 方志军 ,  胡力铭 ,  陈明轩

IPC: G06V10/764 ,  G06V10/80 ,  G06V10/44 ,  G06V10/82 ,  G06N3/0455

Abstract: 本发明涉及一种基于特征增强的工业图像多标签分类方法，包括以下步骤：获取工业图像，输入基于特征增强的工业图像多标签分类网络，获得工业图像多标签分类结果；其中，基于特征增强的工业图像多标签分类网络包括图像特征重构增强模块、图像多模态特征增强模块和结果融合模块，图像特征重构增强模块包括分割层和重构层，重构层用于对切分后的特征进行基于多头自注意力机制的重构；图像多模态特征增强模块中引入CLIP编码器，用于对提示句和工业图像分别进行特征提取，据此计算多模态关联特征；结果融合模块用于融合前述两个模块的标签预测结果，获得最终的多标签分类结果。与现有技术相比，本发明可以进一步提高工业图像的多标签分类精度。

公开(公告)号：CN118334749A

公开(公告)日：2024-07-12

申请号：CN202410513385.5

申请日：2024-04-26

Applicant: 上海工程技术大学

Inventor： 陈明轩 ,  宋佳诚 ,  胡力铭 ,  叶逸航

IPC: G06V40/20 ,  G06V40/10 ,  G06V10/82 ,  G06N3/084 ,  A61B5/16

Abstract: 本发明涉及一种基于情绪识别的动物行为预测方法、装置及介质，方法包括以下步骤：持续获取动物的行为图像，将行为图像输入预训练的评估网络中，通过获取行为图像中动物的体型轮廓、骨骼和关节的位置信息编码数组，根据位置信息编码数组进行情绪预测，得到行为图像的指定情绪的评分，保留满足指定情绪阈值的行为图像；评估网络包括动作识别模块和情绪分析模块，动作识别模块输入为行为图像，输出为位置信息编码数组，情绪分析模块的输入为位置信息编码数组，输出为指定情绪的评分。与现有技术相比，本发明具有能够识别动物动作和情绪之间的关联性与倾向性，有助于揭示行为背后的情绪动态、多只动物交互行为准确度高、主观性低等优点。