公开(公告)号：CN112818159A

公开(公告)日：2021-05-18

申请号：CN202110206288.8

申请日：2021-02-24

Applicant: 上海交通大学

Inventor： 陆佳妮 ,  程帆

IPC: G06F16/583 ,  G06F40/126 ,  G06F40/194 ,  G06F40/242 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明涉及一种基于生成对抗网络的图像描述文本生成方法，包括以下步骤：1)构建用以实现对图像进行特征提取的编码器；2)对文本进行词嵌入，并构建用以生成图像描述文本的解码器；3)根据极大似然估计对由编码器和解码器共同构成的生成器进行预训练；4)构建基于卷积神经网络的判别器并进行训练；5)共同训练生成器与判别器；6)将待生成描述文本的测试图像数据输入训练好的生成器中，输出生成的描述文本。与现有技术相比，本发明具有提高生成的文本的客观评测得分、可解释性好和多样性等优点。

公开(公告)号：CN112818159B

公开(公告)日：2022-10-18

申请号：CN202110206288.8

申请日：2021-02-24

Applicant: 上海交通大学

Inventor： 陆佳妮 ,  程帆

IPC: G06F16/583 ,  G06F40/126 ,  G06F40/194 ,  G06F40/242 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明涉及一种基于生成对抗网络的图像描述文本生成方法，包括以下步骤：1)构建用以实现对图像进行特征提取的编码器；2)对文本进行词嵌入，并构建用以生成图像描述文本的解码器；3)根据极大似然估计对由编码器和解码器共同构成的生成器进行预训练；4)构建基于卷积神经网络的判别器并进行训练；5)共同训练生成器与判别器；6)将待生成描述文本的测试图像数据输入训练好的生成器中，输出生成的描述文本。与现有技术相比，本发明具有提高生成的文本的客观评测得分、可解释性好和多样性等优点。