公开(公告)号：CN119784670A

公开(公告)日：2025-04-08

申请号：CN202411558780.1

申请日：2024-11-04

Applicant: 华南理工大学

Inventor： 蒋乐 ,  徐震 ,  黄艳 ,  吴斯

IPC: G06T7/00 ,  G06T7/10 ,  G06V20/70 ,  G06V10/764 ,  G06V10/26 ,  G06V10/82 ,  G06N3/09

Abstract: 本发明公开了一种基于文本引导的零样本工业缺陷检测方法、设备及介质，其中方法包括：获取工业产品的图像以及文本语义标签，构建训练集和测试集；构建基于文本引导的零样本工业缺陷检测模型，采用训练集对模型进行训练；将测试集输入训练后的模型中进行测试；其中，在训练阶段，模型利用部分种类的工业产品中的缺陷信息，学习并扩展到其他工业产品的统一文本提示；在测试阶段，模型能够在从未训练过的工业产品种类上进行测试，检测其是否存在缺陷并定位缺陷。本发明充分利用预训练多模态大模型CLIP中蕴含的先验知识，使模型能够自适应地学习针对不同物体的通用文本提示，实现对各种工业产品的零样本缺陷检测，可广泛应用于计算机视觉技术领域。