公开(公告)号：CN119693781A

公开(公告)日：2025-03-25

申请号：CN202411781098.9

申请日：2024-12-05

Applicant: 福州大学

Inventor： 李蒙蒙 ,  俞哲耀 ,  汪小钦

IPC: G06V20/00 ,  G06V20/10 ,  G06V10/764 ,  G06V10/20 ,  G06V10/75 ,  G06V10/80 ,  G06V10/82 ,  G06N3/0442 ,  G06N3/08

Abstract: 本发明提出基于街景图像匹配遥感影像的多模态数据城市土地利用场景分类方法，设计基于几何变换的跨视角影像匹配法，实现多视角街景图像和遥感影像空间位置匹配；利用具有较强泛化能力的预训练大模型，构建基于高分辨率遥感影像以及街景图像的城市土地利用场景分类模型，提取不同尺度和不同视角的深度特征；设计全局‑局部特征融合模块，通过自注意力聚合不同层级的特征；设计门控制循环融合模块，以实现不同拍摄时间，拍摄视角的街景图像的交互；通过通道注意力机制，根据不同的权重分配遥感影像特征和街景图像特征，优化其在不同分类任务中的贡献比例，并设计动态梯度调制策略，自适应融合不同模态信息，以实现城市土地利用遥感影像精准分类。