基于大语言模型的垂直领域实体扩充方法和装置

    公开(公告)号:CN119046468B

    公开(公告)日:2025-04-08

    申请号:CN202411525965.2

    申请日:2024-10-30

    Abstract: 本发明公开了一种基于大语言模型的垂直领域实体扩充方法和装置,包括:基于收集的开源数据文本构建包括头实体、关系和尾实体的知识图谱三元组及其来源文本语句;输入大模型生成尾实体的解释,选取部分包括尾实体及其解释的词条输入大语言模型并结合人工判断进行辅助分类并对词条进行打标;将采集的非实体中性词汇、标准垂直领域实体、标准非垂直领域实体、以及打标的词条转换为嵌入特征向量输入垂直领域实体分类模型进行训练;将未打标的词条转换为嵌入特征向量输入训练好的垂直领域实体分类模型进行判断,将所有确认为垂直领域实体的尾实体添加到垂直领域实体库中。本发明能高质高效地更新垂直领域实体库,显著提升垂直领域实体库的广度和质量。

    基于大语言模型的垂直领域实体扩充方法和装置

    公开(公告)号:CN119046468A

    公开(公告)日:2024-11-29

    申请号:CN202411525965.2

    申请日:2024-10-30

    Abstract: 本发明公开了一种基于大语言模型的垂直领域实体扩充方法和装置,包括:基于收集的开源数据文本构建包括头实体、关系和尾实体的知识图谱三元组及其来源文本语句;输入大模型生成尾实体的解释,选取部分包括尾实体及其解释的词条输入大语言模型并结合人工判断进行辅助分类并对词条进行打标;将采集的非实体中性词汇、标准垂直领域实体、标准非垂直领域实体、以及打标的词条转换为嵌入特征向量输入垂直领域实体分类模型进行训练;将未打标的词条转换为嵌入特征向量输入训练好的垂直领域实体分类模型进行判断,将所有确认为垂直领域实体的尾实体添加到垂直领域实体库中。本发明能高质高效地更新垂直领域实体库,显著提升垂直领域实体库的广度和质量。

Patent Agency Ranking