公开(公告)号：CN117392694A

公开(公告)日：2024-01-12

申请号：CN202311674312.6

申请日：2023-12-07

Applicant: 支付宝(杭州)信息技术有限公司

Inventor： 洪燕 ,  兰钧 ,  祝慧佳 ,  王维强

IPC: G06V30/40 ,  G06V30/418 ,  G06V30/19 ,  G06V30/164

Abstract: 本说明书实施例提供了一种数据处理方法、装置及设备，其中，该方法包括：获取与目标文本匹配的目标风险关键词，并获取目标文本与目标风险关键词之间的匹配度；通过预先训练的扩散生成模型，对目标文本进行加噪处理，得到与目标文本对应的第一图像表征；通过预先训练的扩散生成模型，经过预设迭代次数逐次对第一图像表征进行降噪处理，直到最后一次迭代过程结束，得到预先训练的扩散生成模型的输出端的元函数；基于迭代结束得到的预先训练的扩散生成模型的输出端的元函数、目标文本、目标风险关键词以及最后一次迭代过程对应的噪声，生成与目标文本对应的第二图像表征，并基于第二图像表征，确定与目标文本对应的目标图像。

公开(公告)号：CN118839789A

公开(公告)日：2024-10-25

申请号：CN202410978378.2

申请日：2024-07-19

Applicant: 支付宝(杭州)信息技术有限公司

Inventor： 洪燕 ,  段宇轩 ,  张博 ,  陈昊星 ,  兰钧 ,  祝慧佳 ,  王维强

IPC: G06N20/00 ,  G06T11/00

Abstract: 本说明书公开了一种模型训练方法、图像生成方法、装置及电子设备。在此方法中，首先获取基础图像以及第一描述文本，将基础图像以及第一描述文本输入到待训练的图像生成模型中，以使图像生成模型确定基础图像对应的图像特征以及第一描述文本对应的文本特征，并基于基础图像对应的图像特征以及第一描述文本对应的文本特征，生成目标对象以参考对象的体貌特征在指定环境中的图像，作为输出图像，根据输出图像对应的图像特征与基础图像对应的图像特征之间的特征偏差，以及输出图像所表达的图像内容的特征与第一描述文本对应的文本特征之间的相似度，确定综合损失函数值，并根据综合损失函数值，对图像生成模型进行训练。

公开(公告)号：CN117710510B

公开(公告)日：2024-06-11

申请号：CN202410156973.8

申请日：2024-02-04

Applicant: 支付宝(杭州)信息技术有限公司

Inventor： 洪燕 ,  兰钧 ,  祝慧佳 ,  王维强

IPC: G06T11/00 ,  G06V10/26 ,  G06N3/08

Abstract: 本说明书一个或多个实施例公开了一种图像生成方法及装置，该方法首先获取目标主体的前景图像以及目标主体所在的待确定的目标图像的文本描述信息，该目标图像中包括目标主体的前景图像和背景图像，其次，从目标主体的前景图像中分别提取目标主体的类别表征信息和风格表征信息，然后将所提取的类别表征信息和风格表征信息输入预先训练的前景控制模型中，得到目标主体的前景控制信息，最后，通过扩散模型，根据目标图像的文本描述信息和前景控制信息，并通过对目标主体的前景图像添加噪声信息的方式，确定目标主体对应的目标图像。