公开(公告)号：CN118410829A

公开(公告)日：2024-07-30

申请号：CN202410503787.7

申请日：2024-04-25

Applicant: 东北大学秦皇岛分校

Inventor： 王新翔 ,  杨一鸣 ,  李子涵 ,  王松洋 ,  彭翌博 ,  傅昌锃

IPC: G06N3/008 ,  G06N5/04 ,  G06N5/025 ,  G06N3/045 ,  G06N3/098 ,  G10L15/06 ,  G10L15/26 ,  G10L15/34 ,  G10L25/63 ,  G10L25/30 ,  H04L67/06 ,  H04L67/10 ,  H04L67/12

Abstract: 本发明提供一种结合AIGC的多模态情感交互装置及方法，涉及人机交互技术领域。该装置包括用于收集信息、做出信息反馈的情感交互机器人和用于处理情感交互机器人收集信息并下达指令的云端服务器；云端服务器中部署AIGC模型进行信息处理，云端服务器和情感交互机器人使用TCP/IP通信。云端服务器结合了AIGC技术，通过高级的多模态模型，包括语音、视觉、文本处理等，提供了一种高效的方式来识别和表达情感，使得情感交互机器人能更准确地理解和响应用户的情感状态；情感交互机器人采用仿生设计，包括可动态调节的仿生眼球和表情丰富的嘴巴显示模块，这使得它能够以更加自然和真实的方式进行情感表达。