公开(公告)号：CN119007031A

公开(公告)日：2024-11-22

申请号：CN202411113632.9

申请日：2024-08-14

Applicant: 哈尔滨工业大学

Inventor： 谷延锋 ,  杜达宽 ,  刘天竹

IPC: G06V20/13 ,  G06V10/764 ,  G06V10/774 ,  G06V10/26 ,  G06N3/0464 ,  G06N3/0455 ,  G06N3/08

Abstract: 基于掩码图像建模的遥感图像多模态统一表示学习方法，本发明涉及遥感图像多模态统一表示学习方法，属于多模态卫星遥感技术领域。本发明的目的是为了解决现有方法由于遥感异构数据特征差异大与带标签的遥感数据量不足，导致现存方法难以充分利用到海量无标签多模态遥感数据，模型过拟合且分类准确率低的问题。过程为：获得训练好的基于掩码图像建模的遥感图像多模态统一表示学习的分类下游任务微调模型和基于掩码图像建模的遥感图像多模态统一表示学习的语义分割下游任务微调模型；将待测多模态遥感配对图像输入训练好的分类下游任务微调模型，输出分类结果；将待测多模态遥感配对图像输入训练好的语义分割下游任务微调模型，输出语义分割结果。