公开(公告)号：CN113095165A

公开(公告)日：2021-07-09

申请号：CN202110317335.6

申请日：2021-03-23

Applicant: 北京理工大学深圳研究院

Inventor： 谢湘 ,  程皓 ,  梁爽

IPC: G06K9/00 ,  G06K9/32 ,  G06Q10/10

Abstract: 本发明提供了一种用于完善面试表现的模拟面试方法和装置，属于音视频处理技术领域。方法包括：建立面试的数据库；采集面试的音频数据和影像数据，将所述音频数据转换为文字信息，从所述音频数据中提取得到音频信息，从所述影像数据中提取得到影像信息；分析所述文字信息、音频信息和影像信息，分别构成面试回答的文字向量、音频矩阵和影像矩阵；依据所述面试岗位的问题库、行为注意重点表和能力要求表、以及与所述问题库中的问题对应的答案关键词，与所述面试回答的文字向量、音频矩阵和影像矩阵进行比对，得到二者的相关系数和/或距离参数；将所述相关系数和/或距离参数转换为面试意见及建议。本发明通过分析面试者在肢体动作、脸部表情、说话方式方面的行为特点，提供具有岗位针对性的改进意见。

公开(公告)号：CN112651714A

公开(公告)日：2021-04-13

申请号：CN202011557727.1

申请日：2020-12-25

Applicant: 北京理工大学深圳研究院

Inventor： 谢湘 ,  梁爽 ,  程皓

IPC: G06Q10/10 ,  G06Q10/06

Abstract: 本发明提供了一种基于多模态信息的面试测评方法、系统、装置及面试测评模型训练方法，属于机器学习中的多模态信息处理技术领域。所述多模态信息包括文本信息、语音信息、彩色视频信息，以及3D视频信息和/或生理信息。该方法包括采集面试数据，获取面试的多模态信息，提取所述多模态信息的面试特征，将所述面试特征输入预先训练好的面试测评模型，得到应聘者的十个职业能力维度的得分，根据所述得分，输出面试测评结果和聘用结果。面试特征包括文本特征、语音特征、微表情特征、以及姿态特征和/或生理特征。本发明能够提高面试效率和面试测评准确度，通过不同职位的统一的面试测评标准，能全面、客观地对应聘者进行测评。