基于双支路多模态序列学习的影像分析方法

    公开(公告)号:CN118948212A

    公开(公告)日:2024-11-15

    申请号:CN202411032784.6

    申请日:2024-07-30

    Abstract: 本发明提供了一种基于双支路多模态序列学习的影像分析方法,属于医学影像分析技术领域,该方法包括构建多模态嵌入模块,并利用可学习参数填补缺失多模态疾病数据,融合经填补后的多模态特征,得到受试者的编码特征;利用包括静态信息分析模块和动态信息分析模块的双支路结构对编码特征进行分析,得到双支路多模态影像分析特征;对双支路多模态影像分析特征进行融合,得到纵向队列数据中的影像特征;堆叠所有纵向队列数据中的影像特征,并利用除填补的多模态疾病数据外的多模态数据对堆叠的所有纵向队列数据中的影像特征进行分析,得到影像分析结果。本发明解决了多模态纵向队列影像分析方法对多模态信息与时序演变信息利用不充分的问题。

    基于语义敏感度的车道检测模型后训练量化方法与装置

    公开(公告)号:CN118314540A

    公开(公告)日:2024-07-09

    申请号:CN202410365268.9

    申请日:2024-03-28

    Abstract: 本发明公开了一种基于语义敏感度的车道检测模型后训练量化方法与装置。在该车道检测模型后训练量化方法中,首先收集车道检测模型的无标签训练数据集;然后,利用车道变形分数以及噪声等级模拟计算在同一个车道检测模型中,不同语义输出头的语义敏感度;基于不同语义输出头的语义敏感度,动态调整后训练量化过程中不同语义输出头的权重系数,通过区域敏感度损失函数进行后训练量化,直到车道检测模型收敛;最后,对后训练量化后的车道检测模型进行部署,将模拟量化的权重转换成定点数,以减少所需的计算资源和存储空间。

Patent Agency Ranking