公开(公告)号：CN113743250A

公开(公告)日：2021-12-03

申请号：CN202110939047.4

申请日：2021-08-16

Applicant: 华中师范大学

Inventor： 陈增照 ,  李佳文 ,  戴志诚 ,  何秀玲 ,  鲁圆圆 ,  孟秉恒 ,  朱胜虎

IPC: G06K9/00 ,  G06K9/62 ,  G06Q50/20

Abstract: 本发明公开了一种课堂教学行为事件描述模型的构建方法及系统。该构建方法包括如下步骤：获取待训练的课堂教学视频数据；利用语音活动检测技术，将待训练的课堂教学视频数据按照教师的话语划分成多个事件；利用多种人工智能技术对所有事件进行多模态识别，划分为多个维度下的子事件，根据子事件建立事件描述模型，对教师在课堂中的各项教学行为事件进行描述。本发明根据语音对课堂视频进行切割，能够最大程度上保证每一个事件中教师非言语行为的完整性；且通过提取不同事件之间的共性，建立统一描述所有事件的描述模型，不仅能完成对教师各项教学行为的描述，还能反映出事件与事件之间的关联性，使得事件不再是孤立的。

公开(公告)号：CN113743250B

公开(公告)日：2024-02-13

申请号：CN202110939047.4

申请日：2021-08-16

Applicant: 华中师范大学

Inventor： 陈增照 ,  李佳文 ,  戴志诚 ,  何秀玲 ,  鲁圆圆 ,  孟秉恒 ,  朱胜虎

IPC: G06V20/40 ,  G06V20/52 ,  G06F18/24 ,  G06V40/20 ,  G06V10/774 ,  G06Q50/20

Abstract: 本发明公开了一种课堂教学行为事件描述模型的构建方法及系统。该构建方法包括如下步骤：获取待训练的课堂教学视频数据；利用语音活动检测技术，将待训练的课堂教学视频数据按照教师的话语划分成多个事件；利用多种人工智能技术对所有事件进行多模态识别，划分为多个维度下的子事件，根据子事件建立事件描述模型，对教师在课堂中的各项教学行为事件进行描述。本发明根据语音对课堂视频进行切割，能够最大程度上保证每一个事件中教师非言语行为的完整性；且通过提取不同事件之间的共性，建立统一描述所有事件的描述模型，不仅能完成对教师各项教学行为的描述，还能反映出事件与事件之间的关联性，使得事件不再是孤立的。

公开(公告)号：CN112668467A

公开(公告)日：2021-04-16

申请号：CN202011573481.7

申请日：2020-12-25

Applicant: 华中师范大学

Inventor： 陈增照 ,  易宝林 ,  孟秉恒 ,  鲁圆圆 ,  戴志诚 ,  张婧 ,  王旭阳 ,  吴潇楠 ,  曹子妍

IPC: G06K9/00

Abstract: 本申请提供了一种行为分析方法、装置、电子设备及存储介质，涉及数据处理技术领域，该方法包括：基于第一评价数据构建特征矩阵，基于第二评价数据以及设定行为计量表计算得到标签向量。将特征矩阵与标签向量进行拼接后得到第一矩阵，并将第一矩阵输入线性回归模型以得到拟合数据曲线，拟合数据曲线用于表征宣讲者的行为与听讲者的行为的关联性。本申请通过拟合曲线得到宣讲者的行为与听讲者行为的关联性，以分析听讲者对宣讲者行为的反馈行为，避免人工针对听讲者的行为评价宣讲者的行为时的主观性，以提高行为分析的准确性。

公开(公告)号：CN112668476B

公开(公告)日：2024-04-16

申请号：CN202011585656.6

申请日：2020-12-28

Applicant: 华中师范大学

Inventor： 陈增照 ,  鲁圆圆 ,  何秀玲 ,  郑秋雨 ,  戴志诚 ,  张婧 ,  陈荣 ,  刘洪 ,  吴潇楠

IPC: G06V20/40 ,  G06Q10/0637 ,  G06Q50/20

Abstract: 本申请提供一种数据处理方法、装置、电子设备及存储介质，所述数据处理方法具体包括：首先获取教师教学的原始音视频数据；然后从所述原始音视频数据中提取出表征教学行为的特征数据，并根据所述特征数据生成对应的隶属度矩阵，所述隶属度矩阵中的每一行用于表征该行对应的特征数据与预设标准的占比得分；最后基于所述隶属度矩阵以及所述特征数据对应的预设权重矩阵，得到用于表征教学行为质量的目标矩阵。通过本方案能客观、准确地对教学行为质量进行评估，解决了现有教学行为质量评估方法无法客观、准确地对教学行为质量进行评估的问题。

公开(公告)号：CN112668467B

公开(公告)日：2023-11-07

申请号：CN202011573481.7

申请日：2020-12-25

Applicant: 华中师范大学

Inventor： 陈增照 ,  易宝林 ,  孟秉恒 ,  鲁圆圆 ,  戴志诚 ,  张婧 ,  王旭阳 ,  吴潇楠 ,  曹子妍

IPC: G06V20/40 ,  G06V40/20 ,  G06V40/16

Abstract: 本申请提供了一种行为分析方法、装置、电子设备及存储介质，涉及数据处理技术领域，该方法包括：基于第一评价数据构建特征矩阵，基于第二评价数据以及设定行为计量表计算得到标签向量。将特征矩阵与标签向量进行拼接后得到第一矩阵，并将第一矩阵输入线性回归模型以得到拟合数据曲线，拟合数据曲线用于表征宣讲者的行为与听讲者的行为的关联性。本申请通过拟合曲线得到宣讲者的行为与听讲者行为的关联性，以分析听讲者对宣讲者行为的反馈行为，避免人工针对听讲者的行为评价宣讲者的行为时的主观性，以提高行为分析的准确性。

公开(公告)号：CN112668476A

公开(公告)日：2021-04-16

申请号：CN202011585656.6

申请日：2020-12-28

Applicant: 华中师范大学

Inventor： 陈增照 ,  鲁圆圆 ,  何秀玲 ,  郑秋雨 ,  戴志诚 ,  张婧 ,  陈荣 ,  刘洪 ,  吴潇楠

IPC: G06K9/00 ,  G06Q10/06 ,  G06Q50/20

Abstract: 本申请提供一种数据处理方法、装置、电子设备及存储介质，所述数据处理方法具体包括：首先获取教师教学的原始音视频数据；然后从所述原始音视频数据中提取出表征教学行为的特征数据，并根据所述特征数据生成对应的隶属度矩阵，所述隶属度矩阵中的每一行用于表征该行对应的特征数据与预设标准的占比得分；最后基于所述隶属度矩阵以及所述特征数据对应的预设权重矩阵，得到用于表征教学行为质量的目标矩阵。通过本方案能客观、准确地对教学行为质量进行评估，解决了现有教学行为质量评估方法无法客观、准确地对教学行为质量进行评估的问题。