公开(公告)号：CN118735779A

公开(公告)日：2024-10-01

申请号：CN202410739941.0

申请日：2024-06-07

Applicant: 北京卫星信息工程研究所

Inventor： 贺广均 ,  纪骁宵 ,  邓岳 ,  陈千千 ,  岳富占 ,  金世超 ,  冯鹏铭 ,  梁颖 ,  田路云

IPC: G06T3/4053 ,  G06T5/77 ,  G06V10/44 ,  G06V10/74 ,  G06F17/18 ,  G06F17/16 ,  G06N3/0464 ,  G06N3/0455 ,  G06N3/048

Abstract: 本发明涉及一种基于光流运动的红外弱小目标超分辨率重建方法，包括：基于序列图像，得到红外弱小目标的初始特征，并进行增强，得到第一参考帧特征和第一邻域帧特征；将第一参考帧特征、第一邻域帧特征与参考帧和邻域帧两两组合形成4组第二特征，并进行运动补偿，得到2组第三特征；将第三特征分别和参考帧进行组合，最终形成2组第四特征，将2组第四特征输入到特征增强模块；将从特征增强模块输出的特征输入到基于softmax的特征匹配模块；将从特征匹配模块输出的特征和特征增强模块输出的一个特征输入到自关注模块；利用超分辨率重建模块，恢复红外弱小目标的细节信息。本发明，能够恢复大运动的小目标的精细结构，提高了峰值信噪比和结构相似度。

公开(公告)号：CN118628357A

公开(公告)日：2024-09-10

申请号：CN202410803466.9

申请日：2024-06-20

Applicant: 北京卫星信息工程研究所

Inventor： 梁颖 ,  刘斌霄 ,  焦典 ,  陈元伟 ,  纪骁宵 ,  宿南 ,  闫奕名 ,  贺广均 ,  符晗

IPC: G06T3/4076 ,  G06V10/58 ,  G06V10/44 ,  G06N3/0464 ,  G06N3/0455 ,  G06V10/82 ,  G06V10/80

Abstract: 本发明涉及一种基于transformer的跨模态融合高光谱图像超分重建方法，包括：基于场景匹配的RGB图像和高光谱图像，获得融合token序列；采用随机掩膜机制对视觉transformer的编码器和解码器进行联合训练，完成特征重构；步骤S3、构建基于解码器重构的图像与真值图像的相似度的损失函数，对视觉transformer的编码器和解码器进行优化；利用图像重建模块对优化后的视觉transformer的编码器提取的特征进行超分重建。本发明，降低了高光谱图像超分重建的对于数据强配准的要求，扩展了该技术的应用场景，同时空间分辨率提升后的高光谱数据有利于优化下游任务算法的性能，从增强数据的角度降低模型的设计难度，使高光谱数据能够适配于更多的遥感领域任务。