公开(公告)号：CN114048296B

公开(公告)日：2025-04-11

申请号：CN202111192465.8

申请日：2021-10-13

Applicant: 上海交通大学

Inventor： 朱亚杰 ,  卢宏涛

IPC: G06F16/3329 ,  G06F16/35 ,  G06F16/3332 ,  G06F16/338 ,  G06F16/335 ,  G06F16/334

Abstract: 本发明提供了一种基于语义门的闲聊型多轮对话方法、系统、介质及设备，包括：步骤S1：根据业务需求收集相应用户语料并进行预处理，得到预处理后的语料；步骤S2：利用预处理后的语料对预训练语言模型GPT2‑Chinese进行微调，得到微调后GPT2生成模型，使得微调后GPT2生成模型学会从通用自然语言预测转向符合车载文本语言风格的预测生成；步骤S3：输入文本利用微调后GPT2生成模型生成多个回复，并按照置信度从大到小排序，取前N条回复；步骤S4：利用预设数据库对Bert分类模型进行微调，得到微调后的Bert分类模型；步骤S5：联合微调后的Bert分类模型进行回复筛选，使生成的车载闲聊文本流畅且符合用户语义的目的。

公开(公告)号：CN115114908A

公开(公告)日：2022-09-27

申请号：CN202210780514.8

申请日：2022-07-04

Applicant: 上海交通大学

Inventor： 朱亚杰 ,  卢宏涛

IPC: G06F40/279 ,  G06F40/30 ,  G06N3/04 ,  G06N3/08

Abstract: 本发明提供了一种基于注意力机制的文本意图识别方法、系统、车辆及设备，包括：获取并处理输入的语言文本信息，进行基于字符和分词语句的向量化处理，以得到基于字符和分词语句的初始向量；进行多个卷积核处理、多个窗口池化处理、RELU激活函数处理和级联处理获得优化的基于字符语句向量和基于分词的语句向量；进行注意力机制处理进行拼接并加权以获得基于字符和分词语句的加权向量；进行部分元素丢弃和变换以获得基于字符和分词语句的目标向量；经过神经网络的全连接层进行计算以识别得到与语言文本信息对应的文本意图和相应的文本意图概率。本发明能够快速准确地识别中文短文本意图，便于人机多轮对话系统的自然语言理解，提升用户体验。

公开(公告)号：CN114116954A

公开(公告)日：2022-03-01

申请号：CN202111350057.0

申请日：2021-11-15

Applicant: 上海交通大学

Inventor： 朱亚杰 ,  卢宏涛

IPC: G06F16/31 ,  G06F16/332 ,  G06F16/35 ,  G06F40/30

Abstract: 本发明提供了一种基于哈希表的语义理解和对话管理融合方法及系统，所述方法包括如下步骤：步骤S1：根据业务需求构造语义理解微服务；步骤S2：根据业务逻辑构造哈希表和多个对话管理微服务；步骤S3：文本输入到语义理解微服务得到语义结果；步骤S4：根据语义结果的技能通过哈希表映射到对应的对话管理微服务；步骤S5：根据映射到的对话管理微服务给出相应回复。本发明通过采取哈希表对语义结果的技能映射到相应的对话管理模块以至提升对话性能同时保证人机对话良好的用户体验；通过采用哈希表对语义结果的技能映射到相应的对话逻辑模块以至提升对话性能同时保证人机对话良好的用户体验。

公开(公告)号：CN114048807A

公开(公告)日：2022-02-15

申请号：CN202111320893.4

申请日：2021-11-09

Applicant: 上海交通大学

Inventor： 朱亚杰 ,  卢宏涛

IPC: G06K9/62 ,  G06N5/00 ,  G06F16/332

Abstract: 本发明提供了一种基于微服务的语义融合方法、系统及介质，涉及人机交互技术领域，该方法包括：步骤S1：根据业务需求构造多个业务技能语义理解微服务；步骤S2：根据用户语料文本作为多个业务技能语义理解微服务的输入，得到多个语义理解结果；步骤S3：通过置信度级别对多个语义理解结果做语义决策同时获得最佳语义结果。本发明能够通过采取树结构对多个语义理解功能模块融合起来，解决多个业务技能语义理解模型加载占用内存大以及同一个安装包不同版本不兼容和不利于服务工程化的问题，提升对话性能同时保证人机对话良好的用户体验。

公开(公告)号：CN114048296A

公开(公告)日：2022-02-15

申请号：CN202111192465.8

申请日：2021-10-13

Applicant: 上海交通大学

Inventor： 朱亚杰 ,  卢宏涛

IPC: G06F16/332 ,  G06F16/35 ,  G06F16/33 ,  G06F16/338 ,  G06F16/335

Abstract: 本发明提供了一种基于语义门的闲聊型多轮对话方法、系统、介质及设备，包括：步骤S1：根据业务需求收集相应用户语料并进行预处理，得到预处理后的语料；步骤S2：利用预处理后的语料对预训练语言模型GPT2‑Chinese进行微调，得到微调后GPT2生成模型，使得微调后GPT2生成模型学会从通用自然语言预测转向符合车载文本语言风格的预测生成；步骤S3：输入文本利用微调后GPT2生成模型生成多个回复，并按照置信度从大到小排序，取前N条回复；步骤S4：利用预设数据库对Bert分类模型进行微调，得到微调后的Bert分类模型；步骤S5：联合微调后的Bert分类模型进行回复筛选，使生成的车载闲聊文本流畅且符合用户语义的目的。

公开(公告)号：CN114037077A

公开(公告)日：2022-02-11

申请号：CN202111320894.9

申请日：2021-11-09

Applicant: 上海交通大学

Inventor： 朱亚杰 ,  卢宏涛

IPC: G06N5/00 ,  G06F16/332

Abstract: 本发明提供了一种基于白名单的语义决策方法、系统及介质，涉及人机对话技术领域，该方法包括：步骤S1：根据业务需求构造非基础域语义理解微服务和基础域语义理解微服务；步骤S2：根据业务逻辑构造白名单；步骤S3：将文本同时输入到非基础域语义理解微服务和基础域语义理解微服务中，得到相应结果；步骤S4：根据结果判断非基础域技能是否在白名单里，且非基础域技能的置信度是否满足在设定值以上，得出最终语义结果。本发明能够通过采取白名单决策最终语义结果以至提升语义理解准确率和性能同时保证人机对话的用户体验。

公开(公告)号：CN114036286A

公开(公告)日：2022-02-11

申请号：CN202111194961.7

申请日：2021-10-11

Applicant: 上海交通大学

Inventor： 朱亚杰 ,  卢宏涛

IPC: G06F16/35 ,  G06F16/33 ,  G06F16/332

Abstract: 本发明提供了一种意图重审方法及系统，包括根据业务需求收集相应用户语料并进行预处理；根据用户语料定义相应意图；训练和优化意图识别模型；通过意图识别模型识别该用户语料的意图；根据当前意图判别对话类型，如果不是任务型对话则该意图不变为原意图，如果是任务型对话则该意图需要通过意图重审模型进行重审；如果意图重审结果是肯定则该意图不变为原意图，如果意图重审结果是否定则原意图更新为新意图。本发明通过采取意图重审对用户意图细化为肯定意图和否定意图以至提升意图识别的准确率和增强人机对话的用户体验。

公开(公告)号：CN114036291A

公开(公告)日：2022-02-11

申请号：CN202111263529.9

申请日：2021-10-28

Applicant: 上海交通大学

Inventor： 朱亚杰 ,  卢宏涛

IPC: G06F16/35 ,  G06F16/332 ,  G06F16/33 ,  G06F16/36

Abstract: 本发明提供了一种意图发现方法和系统，包括：根据业务需求收集相应用户语料并进行预处理；根据用户语料定义相应意图；根据意图构建和训练意图识别模型，并进行优化；通过意图识别模型识别用户语料的意图；根据当前意图判别意图类型，若判别的意图类型与当前业务类型相同，则对当前意图不进行更新；若判别的意图类型与当前业务类型不符，则通过意图发现模型进行更新，得到新的意图；所述意图发现模型根据用户语料进行构建和训练而得，用于对用户语料进行聚类，然后根据类别中的用户语料和业务需求重新定义意图。本发明通过意图识别模型提升了意图识别准确率同时保证人机对话的用户体验，有效的避免了对用户新意图问答不能识别或较差的现象。

公开(公告)号：CN114036287A

公开(公告)日：2022-02-11

申请号：CN202111204209.6

申请日：2021-10-15

Applicant: 上海交通大学

Inventor： 朱亚杰 ,  卢宏涛

IPC: G06F16/35 ,  G06F16/332 ,  G06F16/33

Abstract: 本发明提供了一种多意图识别方法及系统，所述方法包括如下步骤：步骤S1：根据业务需求收集相应用户语料并进行预处理；步骤S2：根据用户语料定义相应意图；步骤S3：训练和优化多意图识别模型；步骤S4：通过多意图识别模型识别该用户语料的意图个数；步骤S5：如果意图个数是单个则该意图是最佳意图，如果意图个数是多个，可结合业务对多个意图筛选出最佳意图。本发明通过采用多意图识别提升意图识别的准确率和增强人机对话的用户体验；不仅支持用户单意图识别同时也解决人机对话中用户多意图识别问题，从而提升了意图识别准确率同时保证人机对话的用户体验，极大的提高了问答效率，有效的避免了对用户多意图问答不能识别或较差的现象。

公开(公告)号：CN114036268A

公开(公告)日：2022-02-11

申请号：CN202111193760.5

申请日：2021-10-13

Applicant: 上海交通大学

Inventor： 朱亚杰 ,  卢宏涛

IPC: G06F16/332 ,  G06F16/35 ,  G06F16/36 ,  G06N5/04

Abstract: 本发明提供一种基于意图门的任务型多轮对话方法及系统，涉及自然语言处理技术领域，该方法包括：步骤S1：根据业务需求收集相应用户语料并进行预处理；步骤S2：根据所述用户语料定义相应意图、词槽和意图门标签；步骤S3：训练和优化意图识别模型、词槽语义填充模型和意图门模型；步骤S4：对意图识别模型、词槽语义填充模型和意图门模型进行推理；步骤S5：通过意图识别模型和词槽语义填充模型识别该用户语料的意图和提取相应词槽，若词槽已填完，通过当前意图调用相应的信源服务作出回复；若词槽未填完，则进行多轮任务直至所有词槽填完。本发明能够保证任务型多轮对话的正确性和提升人机对话的用户体验。