-
公开(公告)号:CN113035311B
公开(公告)日:2023-05-23
申请号:CN202110340777.2
申请日:2021-03-30
Applicant: 广东工业大学
IPC: G16H15/00 , G16H30/00 , G06F16/35 , G06F40/30 , G06N3/0442
Abstract: 本发明公开了一种基于多模态注意力机制的医学图像报告自动生成方法,使用关键词数据集训练图像特征提取模型,并用该模型提取与图像描述相关的视觉特征,并基于关键词注意力机制和空间注意力机制,利用多模态注意力机制生成联合的上下文向量;上下文向量被输入到了一个句子LSTM,展开几步,然后在每一步都会产生一个主题向量,主题向量表示了所需要生成的句子的语义;给定一个主题向量,单词LSTM以它作为输入,然后生成一个单词序列,用于形成一个句子,这个过程的终止由句子LSTM控制;最后将形成的所有句子组合到一起,列出标签列表,就完成了医学图像报告的自动生成。该方法能有效解决撰写医学图像报告耗时费力,容易出错的问题。
-
公开(公告)号:CN113035311A
公开(公告)日:2021-06-25
申请号:CN202110340777.2
申请日:2021-03-30
Applicant: 广东工业大学
Abstract: 本发明公开了一种基于多模态注意力机制的医学图像报告自动生成方法,使用关键词数据集训练图像特征提取模型,并用该模型提取与图像描述相关的视觉特征,并基于关键词注意力机制和空间注意力机制,利用多模态注意力机制生成联合的上下文向量;上下文向量被输入到了一个句子LSTM,展开几步,然后在每一步都会产生一个主题向量,主题向量表示了所需要生成的句子的语义;给定一个主题向量,单词LSTM以它作为输入,然后生成一个单词序列,用于形成一个句子,这个过程的终止由句子LSTM控制;最后将形成的所有句子组合到一起,列出标签列表,就完成了医学图像报告的自动生成。该方法能有效解决撰写医学图像报告耗时费力,容易出错的问题。
-
公开(公告)号:CN112037132A
公开(公告)日:2020-12-04
申请号:CN202010897207.9
申请日:2020-08-31
Applicant: 广东工业大学
Abstract: 本发明公开了一种多孔径紧凑型多光谱成像系统及深度学习图像超分辨率重建方法,系统包括:面阵CCD探测器、线性渐变滤光片、高精度角度调节器、微透镜阵列、多孔径遮光板、电控精密位移台和计算机;计算机用于通过深度学习图像超分辨率重建算法获取目标物超分辨率图像。多孔径紧凑型多光谱成像系统易于实现、成本低廉、操作和控制方便。通过采用微透镜阵列以及安装角度可调节的线性渐变滤光片,不但可以得到同一目标物的不同波段图像,而且可以调节、控制光谱分辨率。同时,由于采用多孔径遮光板,避免了图像重叠和杂散光影响,抗干扰能力和实用性更强。另外,通过采用深度学习图像超分辨率重建算法,可以快速重建出高质量的超分辨率图像。
-
公开(公告)号:CN111950496A
公开(公告)日:2020-11-17
申请号:CN202010843398.0
申请日:2020-08-20
Applicant: 广东工业大学
Abstract: 本申请公开了一种蒙面人身份识别方法,包括:将待识别蒙面人图像输入预置区域分割网络进行分割处理,得到蒙面人区域图像;将蒙面人区域图像输入至预置编码-解码模型进行特征分离,并删除提取的外部特征,输出蒙面人区域图像的典型特征和姿态特征;对蒙面人区域图像的典型特征进行均值化处理,得到静态步态特征,将姿态特征输入预置LSTM网络进行处理,得到动态步态特征;将静态步态特征和动态步态特征输入至预置分类器进行分类识别,得到待识别蒙面人图像的身份识别结果,解决了现有的人脸识别方法难以识别蒙面人身份的技术问题。
-
公开(公告)号:CN111950496B
公开(公告)日:2023-09-15
申请号:CN202010843398.0
申请日:2020-08-20
Applicant: 广东工业大学
IPC: G06V40/16 , G06V40/10 , G06V10/26 , G06V10/44 , G06V10/764 , G06V10/82 , G06N3/0464 , G06N3/0442 , G06N3/08 , G06T3/40
Abstract: 本申请公开了一种蒙面人身份识别方法,包括:将待识别蒙面人图像输入预置区域分割网络进行分割处理,得到蒙面人区域图像;将蒙面人区域图像输入至预置编码‑解码模型进行特征分离,并删除提取的外部特征,输出蒙面人区域图像的典型特征和姿态特征;对蒙面人区域图像的典型特征进行均值化处理,得到静态步态特征,将姿态特征输入预置LSTM网络进行处理,得到动态步态特征;将静态步态特征和动态步态特征输入至预置分类器进行分类识别,得到待识别蒙面人图像的身份识别结果,解决了现有的人脸识别方法难以识别蒙面人身份的技术问题。
-
公开(公告)号:CN112037132B
公开(公告)日:2023-07-28
申请号:CN202010897207.9
申请日:2020-08-31
Applicant: 广东工业大学
Abstract: 本发明公开了一种多孔径紧凑型多光谱成像系统及深度学习图像超分辨率重建方法,系统包括:面阵CCD探测器、线性渐变滤光片、高精度角度调节器、微透镜阵列、多孔径遮光板、电控精密位移台和计算机;计算机用于通过深度学习图像超分辨率重建算法获取目标物超分辨率图像。多孔径紧凑型多光谱成像系统易于实现、成本低廉、操作和控制方便。通过采用微透镜阵列以及安装角度可调节的线性渐变滤光片,不但可以得到同一目标物的不同波段图像,而且可以调节、控制光谱分辨率。同时,由于采用多孔径遮光板,避免了图像重叠和杂散光影响,抗干扰能力和实用性更强。另外,通过采用深度学习图像超分辨率重建算法,可以快速重建出高质量的超分辨率图像。
-
-
-
-
-