基于大模型的多模态实体链接方法及系统

    公开(公告)号:CN117371527A

    公开(公告)日:2024-01-09

    申请号:CN202311439852.6

    申请日:2023-11-01

    Abstract: 本发明提出一种基于大模型的多模态实体链接方法和系统,将大模型相关的技术应用于知识图谱领域的多模态实体链接问题。相比基于纯文本模态的实体链接,本发明能够考虑到视觉模态的辅助信息,从而能够在纯文本无法消除歧义的场合完成精确的实体链接;而与其他现有的多模态实体链接方法相比,本发明基于参数高效的训练方法,实现了基于大模型的实体链接,能够更好地利用到大模型强大的理解能力和生成能力,在训练代价较小的情况下取得了客观的性能提升。

Patent Agency Ranking