公开(公告)号：CN114972942A

公开(公告)日：2022-08-30

申请号：CN202210520908.X

申请日：2022-05-13

Applicant: 东北大学

Inventor： 雷为民 ,  梁辉 ,  赵莹月 ,  张伟 ,  陈新怡

IPC: G06V10/80 ,  G06N3/04 ,  G06N3/08 ,  G06V10/77 ,  G06V10/774 ,  G06V10/82

Abstract: 本发明提供一种基于混合语义的双流图像重建系统及方法，所述系统包括低级特征提取模块、高级语义特征提取模块、混合特征流模块、低级特征流模块、重建模块；设计混合特征流支路和低级特征流支路搭建重建网络，采用双特征流网络设计可以保证语义信息和结构信息更好地用于图像重建，其中混合特征流支路输出混合语义信息特征图，低级特征流支路输出结构信息特征图；低级特征流支路采用可变形卷积模块提取特征，利用可变形卷积可以自适应改变感受野，从而捕获一些重要的信息；为了加强特征的传播和重用，采用特征融合技术concat()操作和add()操作；本发明方法可以重建出质量较好的图像，且重建的图像会保留完整的结构信息和语义信息。