公开(公告)号：CN117576460A

公开(公告)日：2024-02-20

申请号：CN202311540007.8

申请日：2023-11-17

Applicant: 吉林大学

Inventor： 张小利 ,  孙杰 ,  杨飞扬 ,  李雄飞 ,  李忱阳 ,  王李颖 ,  薄晓磊

IPC: G06V10/764 ,  G06V10/774 ,  G06T7/00 ,  G06V10/42 ,  G06V10/80

Abstract: 本公开提供了一种基于对比学习的多模态医学图像数据集蒸馏方法及装置，获取医学的多模态图像，并进行预处理；将每种模态视为对应成像区域的一种独特的数据增强方法，使用对比学习方法通过少量的标签对多模态图像进行特征提取并融合；基于提取的多模态特征使用知识蒸馏的方法，将大规模的多模态的数据集的信息压缩合成的小型数据集中。本公开有效解决了医学图像标签获取困难问题以及医学图像多模态数据在医院之间传递的隐私和运输成本问题。