公开(公告)号：CN112417172B

公开(公告)日：2021-09-07

申请号：CN202011319237.8

申请日：2020-11-23

Applicant: 东北大学

Inventor： 王大玲 ,  李久枫 ,  冯时 ,  张一飞

IPC: G06F16/36 ,  G06F40/242 ,  G06F40/284 ,  G06F40/295 ,  G06K9/00 ,  G06K9/62

Abstract: 本发明提供一种多模态情绪知识图谱的构建及展示方法，涉及多模态知识管理技术领域。该方法首先收集、下载情绪词汇本体或词典、人脸表情和动物表情图像及社会媒体平台常用的表情符号；并对获取的文本和图像数据资源，分别进行预处理，使这些数据资源满足统一的抽象本体模型需求；然后基于文本情绪词、表情图像以及社交媒体表情符号的预处理结果，构建能够表达不同模态实体以及实体之间关系的多模态情绪知识图谱；最后通过采用前端的文本标记语言和前端页面的元素渲染语言的编程来实现对多模态情绪知识图谱的节点、图谱的边、图谱实体属性信息的展示和渲染；在此基础上实现图谱的用户交互功能；同时，通过图形可视化库增加知识图谱的动态效果。

公开(公告)号：CN112417172A

公开(公告)日：2021-02-26

申请号：CN202011319237.8

申请日：2020-11-23

Applicant: 东北大学

Inventor： 王大玲 ,  李久枫 ,  冯时 ,  张一飞

IPC: G06F16/36 ,  G06F40/242 ,  G06F40/284 ,  G06F40/295 ,  G06K9/00 ,  G06K9/62

Abstract: 本发明提供一种多模态情绪知识图谱的构建及展示方法，涉及多模态知识管理技术领域。该方法首先收集、下载情绪词汇本体或词典、人脸表情和动物表情图像及社会媒体平台常用的表情符号；并对获取的文本和图像数据资源，分别进行预处理，使这些数据资源满足统一的抽象本体模型需求；然后基于文本情绪词、表情图像以及社交媒体表情符号的预处理结果，构建能够表达不同模态实体以及实体之间关系的多模态情绪知识图谱；最后通过采用前端的文本标记语言和前端页面的元素渲染语言的编程来实现对多模态情绪知识图谱的节点、图谱的边、图谱实体属性信息的展示和渲染；在此基础上实现图谱的用户交互功能；同时，通过图形可视化库增加知识图谱的动态效果。