-
公开(公告)号:CN119444899A
公开(公告)日:2025-02-14
申请号:CN202411503885.7
申请日:2024-10-25
Applicant: 南开大学
IPC: G06T11/00 , G06F40/30 , G06N3/0455 , G06N3/0464 , G06N3/08
Abstract: 本发明属于文生图技术领域,提供了基于令牌合并的免训练文生图语义绑定方法及系统,其技术方案为:对输入的提示文本进行标记化处理并编码得到文本嵌入;对文本嵌入分析,得到文本嵌入的耦合性和语义可加性;基于文本嵌入的耦合性和语义可加性构建得到复合令牌,同时,用不包含属性信息的结束令牌替换原始结束令牌;基于语义绑定损失和熵损失迭代更新复合令牌,基于更新后的复合令牌和替换后的结束令牌得到最终的文本嵌入;基于最终文本嵌入生成对应的图像。本发明方法在现有方法难以处理的涉及多个对象和属性的复杂场景中表现非常出色。