公开(公告)号：CN118570538A

公开(公告)日：2024-08-30

申请号：CN202410701324.1

申请日：2024-05-31

Applicant: 西安微电子技术研究所

Inventor： 蒙雨欣 ,  王翰林 ,  霍鹏程 ,  马钟 ,  顾以静

IPC: G06V10/764 ,  G06V10/80 ,  G06V10/82 ,  G06V10/44 ,  G06V10/20 ,  G06N3/0464 ,  G06N3/08

Abstract: 本发明公开了一种基于多角度特征融合模型的废钢材厚度分类方法及相关设备，一方面，相较于直接三维表示，本发明将多视角采样图片与相机位置坐标相结合构建一个节点为不同视图特征表示的视图‑图，在获取输入数据途径简单的同时可利用成熟的高级网络框架进行特征提取，另一方面，相较于简单融合(如最大或平均选取)，本发明利用局部图注意力卷积模块和非局部信息传递模块分层学习包含多个视图关系的多角度全局特征描述符，针对多角度拍摄的二维图像集合，图卷积能有效解决图像位置分布不规则的数据结构，实现根据邻近矩阵进行节点特征更新和权重再分配。

公开(公告)号：CN119107328A

公开(公告)日：2024-12-10

申请号：CN202411193744.X

申请日：2024-08-28

Applicant: 西安微电子技术研究所

Inventor： 顾以静 ,  王翰林 ,  霍鹏程 ,  马钟 ,  蒙雨欣

IPC: G06T7/11 ,  G06V10/774 ,  G06V10/764 ,  G06V10/82 ,  G06V10/25 ,  G06V10/766 ,  G06V10/80

Abstract: 本发明公开了一种基于大模型的废钢材实例分割方法及相关设备，该方法包括对废钢料堆进行多角度拍照，获得高质量的样本照片；对所获得的样本照片中的废钢料型进行实例分割标注得到标注信息，将标注信息转化为COCO数据格式的Json文件，并将Json文件划分为数据集；将数据集输入至废钢材实例分割模型内基于综合损失函数进行训练和参数优化，得到训练后的废钢材实例分割模型；利用训练后的废钢材实例分割模型进行物体掩膜分割输出区域掩膜；将废钢材实例分割模型输出的区域掩膜转化为COCO数据格式的Json文件，以图像为基准，在可视化模块中进行废钢单体图像可视化，存储料型信息，完成废钢单体实例分割，有效提高了模型的零样本分割能力和泛化性能。