一种基于医疗知识图谱的LLM模型微调方法及相关设备

    公开(公告)号:CN119294486A

    公开(公告)日:2025-01-10

    申请号:CN202411297642.2

    申请日:2024-09-14

    Abstract: 本说明书提供了一种基于医疗知识图谱的LLM模型微调方法及相关设备。该方法包括:获取与目标应用场景相关的知识图谱的结构信息;结构信息包含知识图谱中预定义的多个实体类型和多个实体类型之间的关系;基于结构信息生成与目标应用场景相关的推理任务对应的问题模版和回答路径模版;问题模版包含与问题对象对应的第一实体类型;回答路径模版包含:由与问题对象对应的第一实体类型、与问题答案对应的第二实体类型,以及第一实体类型和第二实体类型之间的关系构成的图谱路径;基于问题模版和回答路径模版生成问答样本对,并基于问答样本对,对预训练完成的LLM基础模型进一步执行微调训练,得到用于执行推理任务的LLM服务模型。

    一种医疗LLM模型微调方法及相关设备

    公开(公告)号:CN119128086A

    公开(公告)日:2024-12-13

    申请号:CN202411175813.4

    申请日:2024-08-23

    Abstract: 本说明书提供了一种医疗LLM模型微调方法及相关设备。该方法包括:获取与目标应用场景相关的数据集;所述数据集包括单轮问答样本,所述单轮问答样本包含问题文本和与所述问题文本对应的回答文本;获取基于与所述目标应用场景相关的多轮对话任务的任务需求,构建的与所述多轮对话任务对应的多轮对话规则,并将所述单轮问答样本转换为符合所述多轮对话规则的多轮对话样本;基于所述多轮对话样本对预训练完成的LLM基础模型进一步执行微调训练,得到基于所述多轮对话规则执行所述多轮对话任务的LLM服务模型。

Patent Agency Ranking