-
公开(公告)号:CN117076654B
公开(公告)日:2024-02-27
申请号:CN202311344618.5
申请日:2023-10-18
Applicant: 联通在线信息科技有限公司
IPC: G06F16/332 , G06F18/214 , G06Q10/083
Abstract: 本发明涉及一种用于对话系统的异常检测方法及装置,属于对话系统评测技术领域,该方法包括:对输入的主叫文本预测其对应不同用户意图的概率值,并将满足概率值阈值条件时对应的主叫文本作为待检测样本,获取其对应的识别意图和待选意图,并基于待选意图获取待检测样本对应的回复预设模板,将回复预设模板发送至用户终端,接收用户的回答信息,并基于回答信息提取用户的真实意图,将用户的真实意图与相应待检测样本对应的识别意图进行比较,根据比较结果判断意图识别模型是否异常。本发明提供的方法及装置,可检测模型训练/回复是否存在异常情况,解决了人机对话过程中,机器人回复话术不相关,导致用户体验差的情况。
-
公开(公告)号:CN117076654A
公开(公告)日:2023-11-17
申请号:CN202311344618.5
申请日:2023-10-18
Applicant: 联通在线信息科技有限公司
IPC: G06F16/332 , G06F18/214 , G06Q10/083
Abstract: 本发明涉及一种用于对话系统的异常检测方法及装置,属于对话系统评测技术领域,该方法包括:对输入的主叫文本预测其对应不同用户意图的概率值,并将满足概率值阈值条件时对应的主叫文本作为待检测样本,获取其对应的识别意图和待选意图,并基于待选意图获取待检测样本对应的回复预设模板,将回复预设模板发送至用户终端,接收用户的回答信息,并基于回答信息提取用户的真实意图,将用户的真实意图与相应待检测样本对应的识别意图进行比较,根据比较结果判断意图识别模型是否异常。本发明提供的方法及装置,可检测模型训练/回复是否存在异常情况,解决了人机对话过程中,机器人回复话术不相关,导致用户体验差的情况。
-
公开(公告)号:CN116860953B
公开(公告)日:2024-01-26
申请号:CN202311132051.5
申请日:2023-09-05
Applicant: 联通在线信息科技有限公司
IPC: G06F16/332 , G06F18/214 , G06F18/22 , G06F40/35 , G06F40/205
Abstract: 本发明属于信息检索技术领域,提供一种基于问答系统的问答匹配方法及系统,该方法包括:建立问答知识库,根据业务领域的场景参数,确定问答对;采用召回策略,从所建立的问答知识库召回与各问题相似的问答对,以得到问答对候选集,从中选定指定数量的正样本和负样本以建立原始训练数据集;构建问答匹配模型,采用随机mask机制训练问答匹配模型;接收待回复问题,召回与待回复问题相对应的候选集,使用训练好的问答匹配模型对所召回的候选集进行排序计算,并从中选取最匹配的答案。本发明采用随机mask机制训练问答匹配模型,使问答匹配模型可学习到多种多样特征,在知识库新增问答时,无需重新训练,即可得到精准排序。
-
公开(公告)号:CN116860953A
公开(公告)日:2023-10-10
申请号:CN202311132051.5
申请日:2023-09-05
Applicant: 联通在线信息科技有限公司
IPC: G06F16/332 , G06F18/214 , G06F18/22 , G06F40/35 , G06F40/205
Abstract: 本发明属于信息检索技术领域,提供一种基于问答系统的问答匹配方法及系统,该方法包括:建立问答知识库,根据业务领域的场景参数,确定问答对;采用召回策略,从所建立的问答知识库召回与各问题相似的问答对,以得到问答对候选集,从中选定指定数量的正样本和负样本以建立原始训练数据集;构建问答匹配模型,采用随机mask机制训练问答匹配模型;接收待回复问题,召回与待回复问题相对应的候选集,使用训练好的问答匹配模型对所召回的候选集进行排序计算,并从中选取最匹配的答案。本发明采用随机mask机制训练问答匹配模型,使问答匹配模型可学习到多种多样特征,在知识库新增问答时,无需重新训练,即可得到精准排序。
-
-
-