公开(公告)号：CN119251077A

公开(公告)日：2025-01-03

申请号：CN202411075016.9

申请日：2024-08-07

Applicant: 厦门大学

Inventor： 纪荣嵘 ,  张子岳 ,  林明宝

IPC: G06T5/70 ,  G06F17/10 ,  G06F18/10 ,  G06N3/0455 ,  G06N3/08

Abstract: 本发明公开一种去噪扩散隐式模型的反转方法、电子设备和存储介质，在不需要进行任何训练的情况下，以不增加计算开销的方式，优化去噪扩散隐式模型的反转过程。在总的去噪步数#imgabs0#以内：在特定时间步区间内，将上一时间步的加权潜变量与当前时间步的潜变量进行加权相加得到加权潜变量；在特定时间步区间以外，仅使用DDIM Inversion对#imgabs1#进行反转。本发明主要通过在特定时间步区间内加权相加该时间步的潜变量以及上一时间步的潜变量，由此来改善反转质量，并且没有额外的计算开销，只需稍微增加内存消耗即可，从而实现了以不增加计算开销的方式优化去噪扩散隐式模型的反转过程。

公开(公告)号：CN118587104A

公开(公告)日：2024-09-03

申请号：CN202410497219.0

申请日：2024-04-24

Applicant: 厦门大学

Inventor： 纪荣嵘 ,  张子岳 ,  林明宝

IPC: G06T5/50 ,  G06T5/30 ,  G06V10/762

Abstract: 本发明公开一种采用无训练扩散修改方式在图像中添加物体的方法，在不添加额外输入也不需要进行任何训练的情况下，允许用户在保持图像其余内容几乎不变的同时，将一个对象添加到选定的图像区域中。其包括步骤：让用户在扩散模型生成的原图上框选一个生成区域，并用一个单词指定希望在框选的生成区域中生成的用户添加物体；将用于生成原图的提示和用于生成用户添加物体的提示分别编码，然后将编码结果拼接，作为最终生成结果的提示编码；同时生成三图，在生成过程中，控制用户添加物体的生成位置，并得到最终生成结果的隐变量；增强最终生成结果在框选的生成区域中的互注意力值；在生成过程即将结束时进行腐蚀‑膨胀操作，消去不连通的小块区域。