公开(公告)号：CN110598713B

公开(公告)日：2022-05-06

申请号：CN201910722270.6

申请日：2019-08-06

Applicant: 厦门大学

Inventor： 纪荣嵘 ,  陈福海 ,  沈忱

IPC: G06V10/40 ,  G06V10/70 ,  G06K9/62 ,  G06N3/04 ,  G06N3/08

Abstract: 基于深度神经网络的智能图像自动描述方法，涉及人工智能领域中的智能图像自动描述。包括以下步骤：1)描述数据预处理；2)抽取图像深度卷积特征和语义信息；3)基于多层级视觉语义嵌入的智能图像自动描述。采用因式分解的注意力机制模块，可解决图像自动描述中没有考虑语义信息层次性以及没有考虑场景信息等问题，可以显式地嵌入场景相关的语义信息，用以指导物体相关的语义信息嵌入和图像特征的嵌入。基于多层级视觉语义嵌入的图像自动描述研究，可方便图像自动描述在工业届中的推广与使用。

公开(公告)号：CN110598713A

公开(公告)日：2019-12-20

申请号：CN201910722270.6

申请日：2019-08-06

Applicant: 厦门大学

Inventor： 纪荣嵘 ,  陈福海 ,  沈忱

IPC: G06K9/46 ,  G06K9/62 ,  G06N3/04 ,  G06N3/08

Abstract: 基于深度神经网络的智能图像自动描述方法，涉及人工智能领域中的智能图像自动描述。包括以下步骤：1)描述数据预处理；2)抽取图像深度卷积特征和语义信息；3)基于多层级视觉语义嵌入的智能图像自动描述。采用因式分解的注意力机制模块，可解决图像自动描述中没有考虑语义信息层次性以及没有考虑场景信息等问题，可以显式地嵌入场景相关的语义信息，用以指导物体相关的语义信息嵌入和图像特征的嵌入。基于多层级视觉语义嵌入的图像自动描述研究，可方便图像自动描述在工业届中的推广与使用。