-
公开(公告)号:CN118942445A
公开(公告)日:2024-11-12
申请号:CN202410938705.1
申请日:2024-07-14
Applicant: 南开大学
Abstract: 本发明属于语音识别技术领域,更具体地,涉及一种基于原型的构音障碍语音识别方法。该方法包括以下步骤:S1、微调用于特征提取的HuBERT,在构音障碍语音识别任务上对预训练的自监督学习模型HuBERT进行微调,在微调阶段使用CTC损失和监督对比学习损失来有效地指导模型的训练,微调后的HuBERT用作特征提取器;S2、构建每个单词的原型;S3、基于原型的分类。本发明提供了一种快速有效的方法来提高对未见过的构音障碍说话人的语音识别。本发明将CTC损失与SCL损失相结合,以训练DSR模型,通过学习更好的特征表示来提高性能。
-
公开(公告)号:CN112562467A
公开(公告)日:2021-03-26
申请号:CN202110002539.0
申请日:2021-01-04
Applicant: 南开大学
IPC: G09B23/18
Abstract: 本发明涉及一种便携式的胶囊实验平台。该实验平台包括:胶囊实验板、胶囊电压源、胶囊信号源、胶囊示波器和胶囊万用表,所述胶囊实验板上所述设有胶囊电压源;所述的胶囊实验板上设有信号输入接口、输出接口,所述输入接口、输出接口用于与胶囊信号源、胶囊示波器、胶囊万用表连接使用;所述胶囊信号源用于提供实验电路所需的输入信号,所述胶囊示波器和所述胶囊万用表用于测量实验电路的输出量。本发明能够完成电子信息类的大部分实验项目。
-
公开(公告)号:CN117591858A
公开(公告)日:2024-02-23
申请号:CN202311585304.4
申请日:2023-11-24
Applicant: 南开大学
IPC: G06F18/213 , G06F18/24 , G06N3/048 , G06N3/0464 , G06N3/08 , G06F16/35
Abstract: 本发明属于多模态情感识别领域和表征学习领域,更具体地涉及一种细粒度表征解耦学习的情感识别模型构建方法。首先,使用模态共享编码器和模态私有编码器提取模态的共享表征和私有表征。其次,使用细粒度对齐方法约束模态共享表征的学习,从而捕捉模态一致性。使用细粒度差异化方法来学习模态私有表征并增强其多样性。随后,使用细粒度预测方法以确保编码器输出表征的标签保持不变。最后,由跨模态融合方法构建更丰富的表示形式用于情感识别任务。
-
-