公开(公告)号：CN114154611A

公开(公告)日：2022-03-08

申请号：CN202111328333.3

申请日：2021-11-10

Applicant: 中国科学院自动化研究所

Inventor： 倪晚成 ,  徐佳乐 ,  王士贤 ,  黄凯奇 ,  杨旭阳

IPC: G06N3/00 ,  G06F16/21 ,  G06F16/25 ,  G06F16/248

Abstract: 本发明提供一种支持图灵测试模式的人机对抗系统及智能体测试方法，所述系统包括：人机对抗模块，用于完成人机对抗；其中，通过人类对抗者和智能体在双盲环境下完成人机对抗；对抗数据采集模块，用于获取人机对抗结果以及人机对抗的复盘对抗数据；对抗数据分析模块，用于根据复盘对抗数据获取智能体的效能数据；图灵问卷模块，用于通过图灵问卷的形式，采集智能体的外界评价信息；对抗成绩管理模块，用于接收并存储人机对抗结果、智能体的外界评价信息和智能体的效能数据，并根据人机对抗结果、智能体的外界评价信息和智能体的效能数据获取智能体的能力测试结果。本发明实现了对智能体决策能力的全面有效地测试。

公开(公告)号：CN114154611B

公开(公告)日：2022-12-06

申请号：CN202111328333.3

申请日：2021-11-10

Applicant: 中国科学院自动化研究所

Inventor： 倪晚成 ,  徐佳乐 ,  王士贤 ,  黄凯奇 ,  杨旭阳

IPC: G06N3/00 ,  G06F16/21 ,  G06F16/25 ,  G06F16/248

Abstract: 本发明提供一种支持图灵测试模式的人机对抗系统及智能体测试方法，所述系统包括：人机对抗模块，用于完成人机对抗；其中，通过人类对抗者和智能体在双盲环境下完成人机对抗；对抗数据采集模块，用于获取人机对抗结果以及人机对抗的复盘对抗数据；对抗数据分析模块，用于根据复盘对抗数据获取智能体的效能数据；图灵问卷模块，用于通过图灵问卷的形式，采集智能体的外界评价信息；对抗成绩管理模块，用于接收并存储人机对抗结果、智能体的外界评价信息和智能体的效能数据，并根据人机对抗结果、智能体的外界评价信息和智能体的效能数据获取智能体的能力测试结果。本发明实现了对智能体决策能力的全面有效地测试。