一种多模态数据互补、校错与容失机制的融合方法

    公开(公告)号:CN120030499A

    公开(公告)日:2025-05-23

    申请号:CN202510472091.7

    申请日:2025-04-16

    Abstract: 本发明公开一种多模态数据互补、校错与容失机制的融合方法,步骤包括:采集同一场景下的微波数据流和红外数据流;对微波数据和红外数据流进行特征提取,采用多模态特征融合框架,通过自适应学习特征的权重,进行多模态数据的互补融合;设计多模态生成网络对丢失模态数据进行生成,利用配准差异自动识别和修正传感器引起的配准误差;对信息缺失和误差修正进行容错性处理,动态调整不同模态在融合中的权重,增强系统在复杂环境下的稳定性。通过深度学习的驱动,充分发挥多模态数据间的互补性,解决了信息缺失、配准误差和容错性问题,显著提高了微波与红外数据融合的精度与鲁棒性,适用于复杂数据融合任务中的目标检测与识别。

    一种基于小波变换的红外与微波信息视频编码融合方法

    公开(公告)号:CN118301353B

    公开(公告)日:2024-09-17

    申请号:CN202410728757.6

    申请日:2024-06-06

    Abstract: 一种基于小波变换的红外与微波信息视频编码融合方法,步骤包括采集同一场景下的红外视频流和微波成像设备的信息片段;对红外视频流进行逐帧提取、去噪、对比度增强的预处理操作,对微波信息片段进行去除伪影、动态范围压缩的预处理操作;对红外视频帧及微波信息片段进行特征提取;通过小波变换融合算法进行融合编码,生成融合视频帧,进行去噪及细节增强的后处理操作;采用H.265/HEVC将融合后的图像序列编码成视频文件。实现了多模态的信息融合,获得更全面和完善的场景信息;通过尺度不变特征变换算法,提高融合的准确性。通过小波变换算法,有效融合红外图像和微波信息,扩大了红外视频和微波信息视频编码融合技术的适用范围。

Patent Agency Ranking