公开(公告)号：CN116524791A

公开(公告)日：2023-08-01

申请号：CN202310371018.1

申请日：2023-04-07

Applicant: 华中科技大学

Inventor： 田佳钦 ,  何思珝 ,  赵勤劳 ,  肖阳 ,  王然

IPC: G09B21/00 ,  G10L13/02 ,  G10L25/24 ,  G06V40/16 ,  G06F18/22 ,  G06F40/20 ,  G06V20/40 ,  G06V10/25 ,  G06V10/764 ,  G06V10/774 ,  G06T13/40 ,  G06F3/01

Abstract: 本发明公开了一种基于元宇宙的唇语学习辅助训练系统及其应用，其中系统包括：唇读训练模块，用于存储标准唇形视频，建立元宇宙学习场景，使得用户在元宇宙学习场景中通过标准唇形视频进行唇读训练，计算用户唇读的文本和标准唇形视频的文本之间的相似度；虚拟人对答沟通模块，用于建立元宇宙社交场景，使得用户在元宇宙社交场景中与虚拟人进行对答沟通；用户个人中心模块，用于记录和反馈用户的唇读训练效果，将用户的音频与人脸结合形成用户的虚拟形象，使得用户在元宇宙社交场景中以虚拟形象与其他用户进行对答沟通。本发明系统可以提高唇语学习的准确率，及时反馈学习效果，互动性强，学习辅助方式多样，使用户通过系统辅助增强沟通能力。