公开(公告)号：CN118260638A

公开(公告)日：2024-06-28

申请号：CN202410465155.6

申请日：2024-04-18

Applicant: 南京龙垣信息科技有限公司

Inventor： 赵胜 ,  丁卓 ,  贺东海

IPC: G06F18/24 ,  G06F18/25 ,  G06N5/01 ,  G06V40/16 ,  G10L25/63

Abstract: 本发明涉及数据处理技术领域，具体涉及一种多模态情感识别系统及方法；包括数据收集模块、数据处理模块、语音情感分析模块、图像情感分析模块、情感融合模块和识别输出模块；数据处理模块用于对语音数据和图像数据进行处理；语音情感分析模块用于使用深度学习模型识别情感状态；图像情感分析模块用于使用深度学习模型识别面部表情和情感状态；情感融合模块用于对语音情感分析模块和图像情感分析模块识别出的情感状态进行融合；通过将语音和图像情感分析的结果进行融合，提供了更准确的情绪识别，综合考虑语音和图像两方面的信息，有助于消除单一模态的局限性，实现提高情感识别的可靠性和鲁棒性。

公开(公告)号：CN118245994A

公开(公告)日：2024-06-25

申请号：CN202410425927.3

申请日：2024-04-10

Applicant: 南京龙垣信息科技有限公司

Inventor： 赵胜 ,  丁卓 ,  贺东海

IPC: G06F21/32 ,  G06V40/70 ,  G06V40/16 ,  G06V40/40 ,  G10L15/02 ,  G10L15/06 ,  G10L15/18 ,  G10L25/24 ,  G10L25/30 ,  G10L25/51

Abstract: 本发明涉及身份验证技术领域，具体涉及一种多模态身份验证系统及方法；包括声纹识别模块、唇语识别模块、人脸识别模块、活体检测模块、数字语音密码锁模块、数据整合模块和结果评估模块，声纹识别模块用于分析用户个体的声音特征，进行身份验证；唇语识别模块用于识别说话内容；人脸识别模块用于识别和验证个体身份；活体检测模块用于判断是否为真实的人类面部；数字语音密码锁模块用于分析语音信号中的数字内容和说话者的声音特征验证身份；数据整合模块用于融合声纹、唇语、人脸及数字语音密码；结果评估模块用于对融合结果进行评估，通过上述方式，实现身份验证中更加稳健和可靠的验证过程，提高身份验证的安全性能。