-
公开(公告)号：CN117975991B
公开(公告)日：2024-07-02
申请号：CN202410370739.5
申请日：2024-03-29
Applicant: 华东交通大学
Abstract: 本发明公开了一种基于人工智能的数字人驱动方法及装置，该方法包括：获取包含人体信息的人体图像，将所述人体图像输入至预训练的三维重建模型当中得到数字人模型；捕捉所述数字人模型的可用语音信息，从所述可用语音信息当中提取出音频特征并将所述音频特征转换为文本数据；获取所述文本数据对应的响应文本数据，并将所述响应文本数据转换为响应音频数据后通过预设算法得到口型数据；根据所述响应音频数据和口型数据确定驱动数据，并利用所述驱动数据驱动所述数字人模型。本发明解决了现有技术中在通过深度学习进行数字人的表情、手势以及情绪上的驱动时智能化繁杂的问题。
-
公开(公告)号：CN117975991A
公开(公告)日：2024-05-03
申请号：CN202410370739.5
申请日：2024-03-29
Applicant: 华东交通大学
Abstract: 本发明公开了一种基于人工智能的数字人驱动方法及装置，该方法包括：获取包含人体信息的人体图像，将所述人体图像输入至预训练的三维重建模型当中得到数字人模型；捕捉所述数字人模型的可用语音信息，从所述可用语音信息当中提取出音频特征并将所述音频特征转换为文本数据；获取所述文本数据对应的响应文本数据，并将所述响应文本数据转换为响应音频数据后通过预设算法得到口型数据；根据所述响应音频数据和口型数据确定驱动数据，并利用所述驱动数据驱动所述数字人模型。本发明解决了现有技术中在通过深度学习进行数字人的表情、手势以及情绪上的驱动时智能化繁杂的问题。
-
Search Results
2
records
(took 0.016 seconds)
