一种基于注意力机制的稀疏医疗实体识别方法

    公开(公告)号:CN117952107A

    公开(公告)日:2024-04-30

    申请号:CN202410065458.9

    申请日:2024-01-17

    Applicant: 重庆大学

    Abstract: 本发明提出了一种基于注意力机制的稀疏医疗实体识别方法,包括以下步骤:S1,通过BERT模型提取词向量并利用Bi‑LSTM进一步抽取特征;S2,使用Attention机制来提取词向量内部的深层联系;S3,依据每一个批次的实体稀疏程度特点动态调整集成学习中的实体类别权重及融合权重;S4,通过CRF层输出预测结果。本发明所提出的命名实体识别模型不仅能够动态地聚焦难以识别的样本从而提高学习效率,同时也引入了减少因子以减小稀疏实体在参数更新时带来的干扰。这使得模型在应对医疗命名实体识别中的不平衡实体数量和稀疏实体问题时,性能得到了显著提升。

    一种基于Transformer和知识图谱增强的医疗自动问诊方法

    公开(公告)号:CN118861228A

    公开(公告)日:2024-10-29

    申请号:CN202410831473.X

    申请日:2024-06-26

    Applicant: 重庆大学

    Abstract: 本发明提出了一种基于Transformer和知识图谱增强的医疗自动问诊方法,包括:S1,将症状序列分别输入Transformer编码器和知识图谱编码器,从Transformer编码器得到序列上下文级嵌入表示,从知识图谱编码器得到实体级嵌入表示;S2,然后将序列上下文级嵌入表示和实体级嵌入表示进行交叉注意力融合,得到特征融合向量;S3,若检测到特征融合向量的序列尾部有症状预测令牌[S],则进行症状预测,并执行下一步骤:若检测到特征融合向量的序列尾部有症状预测令牌[D],则进行疾病预测,输出预测的疾病;S4,模型将症状预测的结果作为隐性症状插入到症状序列中,跳转执行步骤S1。本发明采用的Transformer模型依托于自注意力机制,Transformer模型能够高效地识别这些复杂的模式和关联,从而实现更为精确的症状预测。

    一种基于知识图谱的综合管廊隐患风险预测方法

    公开(公告)号:CN118656674A

    公开(公告)日:2024-09-17

    申请号:CN202410764449.9

    申请日:2024-06-14

    Applicant: 重庆大学

    Abstract: 本发明提出了一种基于知识图谱的综合管廊隐患风险预测方法,包括以下步骤:S1,获取异常监测数据类型序列,所述异常监测数据类型序列包括若干个类型标签;S2,将异常监测数据类型序列分别输入实体推荐网络和响应生成网络预测风险构件概率排名;S3,将实体生成网络与响应生成网络得到的风险构件概率进行加权求和,得到最终的风险构件概率。本发明提出应用综合管廊运维风险知识图谱、结合生成式模型,利用历史动态监测数据训练,根据输入的动态监测数据,推理生成风险分析结论,获取排名靠前的数个隐患风险。通过本发明方法能快速、准确地预测出管廊运维风险的风险类型,从而提供基于风险信息的运维决策支持。

Patent Agency Ranking