公开(公告)号：CN107710192A

公开(公告)日：2018-02-16

申请号：CN201680031905.2

申请日：2016-05-06

Applicant: 微软技术许可有限责任公司

Inventor： M·盖利 ,  A·索尔多尼 ,  C·J·布罗凯特 ,  高剑峰 ,  W·B·多兰 ,  冀阳峰 ,  M·奥利 ,  M·A·米歇尔 ,  C·B·奎克

IPC: G06F17/28 ,  H04L12/58

CPC classification number: H04L51/02 ,  G06F17/2881 ,  H04L51/10 ,  H04L51/26

Abstract: 示例总体上涉及对机器生成的会话响应的自动评价。从至少一个会话数据源提取上下文-消息响应n元组以生成多参考响应集合。多参考响应集合中的响应包括上下文-消息数据对和评级。评级指示响应相对于上下文-消息数据对的质量。响应评价引擎基于评价度量和多参考响应集合来生成用于机器生成的响应的度量分数。度量分数指示机器生成的会话响应相对于用户生成的消息和用户生成的消息的上下文的质量。基于度量分数来优化和调整比如数字助理的计算设备的响应生成系统，以提高向用户输出的响应的准确度、质量和相关度。

公开(公告)号：CN114830148A

公开(公告)日：2022-07-29

申请号：CN202080088072.X

申请日：2020-11-05

Applicant: 微软技术许可有限责任公司

Inventor： M·盖利 ,  C·B·奎克 ,  W·B·多兰 ,  吴泽秋

IPC: G06N20/00 ,  G06N3/04 ,  G06F40/56 ,  G06N3/08 ,  G06N3/00

Abstract: 一种可控制基准响应生成框架包括机器学习模型、基准接口和控制接口。机器学习模型被训练为基于输入文本输出计算机生成的文本。基准接口由机器学习模型可使用来访问包括与输入文本相关的信息的基准源。控制接口可由机器学习模型用来识别控制信号。机器学习模型被配置为将来自基准源的信息包括在计算机生成的文本中，并且基于控制信号聚焦计算机生成的文本。