-
公开(公告)号：CN113554733A
公开(公告)日：2021-10-26
申请号：CN202110859533.5
申请日：2021-07-28
Applicant: 北京大学
Abstract: 基于语言的解耦合条件注入灰度图像彩色化方法，涉及图像处理技术领域，解决现有技术存在的颜色与事物的不匹配问题及颜色与事物的耦合问题，本发明利用提取器对原始Caption进行关键词的提取，然后利用检测器对精简的Caption进行补全后输入到解耦合的条件注入模块，在将Caption注入到神经网络时，利用Step D‑A‑I完成：分离Caption中表示颜色和表示物体的两部分，用表示物体的部分进行定位，表示颜色的部分进行相应部位的颜色分配。实现了文本中事物定位任务与颜色注入任务的分离。使得最后得到的彩色图像满足本文的要求。
-
公开(公告)号：CN114842105A
公开(公告)日：2022-08-02
申请号：CN202210625609.2
申请日：2022-06-02
Applicant: 北京大学
Abstract: 本发明公开了一种一体化的条件图像重绘方法及装置，设计多模态条件融合模块以及注入模块来实现多模态条件的解耦和交互，通过建立背景条件与其他条件的交互和依赖关系来缓解阶段间独立性，生成高质量、拼接自然的重绘图像。同时，本发明通过设计垂直的跨模态相似度模块来匹配不同中间层的特征以及颜色文本不同语义层的特征，兼顾局部特征和全局特征，即粗细粒度的特征匹配，使得文本编码器能进行细粒度表征，缓解两阶段中的重绘图像与颜色文本间的不一致现象，使得重绘图像和输入颜色条件保持一致，满足用户需求。此外，本发明扩展了应用场景，构造了一个新的风景数据集，实现了人物重绘到对室外风景重绘的扩展，体现了本发明方法较高的泛化性能。
-
Patent Agency Ranking
公开(公告)号：CN118710533A
公开(公告)日：2024-09-27
申请号：CN202410812633.6
申请日：2024-06-22
Applicant: 北京大学
IPC: G06T5/70 , G06N3/0464 , G06N3/08 , G06T7/194 , G06N3/0442 , G06T3/4038
Abstract: 本发明提供一种文本辅助的反光去除方法，包括：输入数据编码、迭代优化控制条件、多条件引导机制和去噪过程4个步骤，每个步骤均通过神经网络中相应设计的模块来实现；通过文本辅助提供语义信息进行反光去除，大大提升实际使用的便利性，并使反光去除的效果超过以往的单张图像的方法；对于扩散模型中遇到的不准确的初始控制条件，能在迭代中进行优化，让扩散模型去除反光后恢复出的背景层保证颜色和结构上的准确性，并且能处理复杂困难的反光场景，如低背景可见度或饱和反光的情况；构建的带有文本提示的数据集，适用文本辅助的反光去除方法的训练和测试，本方法设计科学合理，简单可靠，适合推广。
-
公开(公告)号：CN118429530A
公开(公告)日：2024-08-02
申请号：CN202410503645.0
申请日：2024-04-25
Applicant: 北京大学
Abstract: 本发明公开了一种带光照感知的具有光照真实感的图像条件重绘制方法。提出了带光照感知能力的具有光照真实感图像条件重绘制任务及相应算法，旨在解决当前图像条件重绘制方法在保持图像整体光照真实感和和谐性方面存在的不足。通过从用户给定的背景图像中提取场景光照信息并从用户给定的前景物体语义分割掩码中预测前景物体区域在三维世界中的形状表示，随后计算前景物体对应的照明图作为二维图像上的光照表示，可以根据用户指定的属性重新绘制具有正确光照效果的图像前景物体，同时对应地修改图像背景区域以实现整体光照和谐观感。为了支持数据驱动的训练，采用图形学渲染合成的方法获取了大量成对的参考图像数据，并以此构建包含完整标注的室外场景光照下的多样化数据集。相较于现有图像重绘制方法，本发明的主客观性能大幅提升，重绘制的图像体现出真实且和谐的光照效果。
-
公开(公告)号：CN115690288B
公开(公告)日：2023-05-16
申请号：CN202211368563.7
申请日：2022-11-03
Applicant: 北京大学
IPC: G06T15/00 , G06T15/04 , G06N3/08 , G06N3/0464 , G06N3/0455
Abstract: 本发明公开了一种由颜色标符指导的自动着色算法及装置，通过端到端的着色Transformer结构的设计，在图像着色任务上的着色效果大大超越之前的着色方法。同时，通过设计全新的灰度选择模块，减小可选颜色的范围从而减少不合理着色现象的发生。由于没有引入额外的外部先验，本发明的模型可以适合更多通用场景。此外，引入color token的概念，从而将着色任务看做是分类任务来提升色彩饱和度。设计了color attention和color query的模块来指导灰度图像特征和color token之间的交互，从而生成视觉上美观并且合理的着色结果。
-
公开(公告)号：CN115690288A
公开(公告)日：2023-02-03
申请号：CN202211368563.7
申请日：2022-11-03
Applicant: 北京大学
IPC: G06T15/00 , G06T15/04 , G06N3/08 , G06N3/0464 , G06N3/0455
Abstract: 本发明公开了一种由颜色标符指导的自动着色算法及装置，通过端到端的着色Transformer结构的设计，在图像着色任务上的着色效果大大超越之前的着色方法。同时，通过设计全新的灰度选择模块，减小可选颜色的范围从而减少不合理着色现象的发生。由于没有引入额外的外部先验，本发明的模型可以适合更多通用场景。此外，引入color token的概念，从而将着色任务看做是分类任务来提升色彩饱和度。设计了color attention和color query的模块来指导灰度图像特征和color token之间的交互，从而生成视觉上美观并且合理的着色结果。
-
公开(公告)号：CN113554733B
公开(公告)日：2022-02-01
申请号：CN202110859533.5
申请日：2021-07-28
Applicant: 北京大学
Abstract: 基于语言的解耦合条件注入灰度图像彩色化方法，涉及图像处理技术领域，解决现有技术存在的颜色与事物的不匹配问题及颜色与事物的耦合问题，本发明利用提取器对原始Caption进行关键词的提取，然后利用检测器对精简的Caption进行补全后输入到解耦合的条件注入模块，在将Caption注入到神经网络时，利用Step D‑A‑I完成：分离Caption中表示颜色和表示物体的两部分，用表示物体的部分进行定位，表示颜色的部分进行相应部位的颜色分配。实现了文本中事物定位任务与颜色注入任务的分离。使得最后得到的彩色图像满足本文的要求。
-
-
-
-
-
-
Search Results
7
records
(took 0.014 seconds)
