公开(公告)号：CN119068069A

公开(公告)日：2024-12-03

申请号：CN202410887406.X

申请日：2024-07-03

Applicant: 南京理工大学

Inventor： 逄淑超 ,  马儒昊 ,  李冰 ,  陆黎明 ,  杜安安 ,  吴战

IPC: G06T9/00 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/084

Abstract: 本申请涉及一种图像数据的安全处理方法、装置、计算机设备、存储介质和计算机程序产品。所述方法包括：对待保护的第一图像数据的像素值进行转换，使得第一图像数据的像素值由原始像素值域转换到适于第一图像数据的像素值处理的目标像素值域；对第一图像数据中处于目标像素值域的像素值执行随机像素翻转操作，获得随机像素翻转操作后的第二图像数据；基于第一图像数据，对第二图像数据执行梯度迭代优化操作，获得梯度迭代优化后的第三图像数据；对第三图像数据的像素值进行转换，使得第三图像数据的像素值处于原始像素值域，从而获得面纱数据。采用本方法，在兼顾图像数据的可用性的同时，能够有效隐藏图像数据的视觉隐私信息。

公开(公告)号：CN119399577A

公开(公告)日：2025-02-07

申请号：CN202411424042.8

申请日：2024-10-12

Applicant: 南京理工大学

Inventor： 逄淑超 ,  顾翔 ,  杜安安 ,  王艺菲 ,  苗吉祥

IPC: G06V10/774 ,  G06V10/82 ,  G06V20/64 ,  G06N3/045 ,  G06N3/0475 ,  G06N3/08

Abstract: 本发明公开了一种针对点云大模型的多模态动态微调方法及系统，基于目标大模型，包括：将点云数据转换成点云序列和2D深度图，将文本数据添加占位符，供后续步骤使用；构建动态多模态信息收集器，对预处理得到的2D深度图和文本进行处理，收集来自文本领域和2D图像领域的信息；构建多模态提示令牌生成器，基于点云序列和多模态信息收集器收集到的信息，生成适用于目标大模型的点云编码器的动态提示词参数；将动态多模态信息收集器和多模态提示令牌生成器嵌入目标大模型，使用数据集，通过交叉熵损失函数对目标大模型进行训练调整。本发明通过动态挖掘点云数据的多模态信息，实现对模型的精准微调，从而显著提升模型在各种下游任务上的性能和泛化能力。