-
公开(公告)号:CN119780912A
公开(公告)日:2025-04-08
申请号:CN202411907352.5
申请日:2024-12-24
Applicant: 上海交通大学
Abstract: 一种基于毫米波雷达的语音探测方法,通过毫米波雷达收集毫米波原始数据并预处理后,通过提取出物体表面振动信号后,通过语音分离网络将振动信号分解成多个目标对应的振动信号;通过卷积网络进一步识别振动信号得到目标的语音内容并探测出其中的敏感信息。本发明通过采集多人说话场景中的物体表面振动,并使用语音分离网络分离出来自不同目标的振动,依次送入语音识别模块,最后探测出各目标语音内容中的敏感信息。
-
公开(公告)号:CN117194897A
公开(公告)日:2023-12-08
申请号:CN202311173181.3
申请日:2023-09-12
Applicant: 上海交通大学
IPC: G06F18/10 , G06F18/213 , G06F18/214 , G06F18/25 , G06N3/0464 , G06N3/044 , G06N3/0455 , G06N3/08 , G06K7/10
Abstract: 一种基于RFID的语音感知方法,通过条件去噪自编码器网络(CDAE)对收集到的RF信号进行预处理以消除身体运动干扰后,将预处理后的RF信号分别通过循环神经网络(RNN)、卷积循环神经网络(CRNN)和深度残差收缩网络(DRSN)提取得到面部运动、骨骼振动和空气振动特征,经融合后输入对比学习网络以去除面部语音动态特征中的用户特异性,获取与用户无关只与声音内容相关的面部语音动态特征后,根据面部语音动态特征构建面部语音动态模型,实现语音感知。本发明通过在普通眼镜上张贴一个无需持续电源供应、低成本的RFID标签感知人说话时的面部语音动态,以自然、鲁棒的方式进行语音感知,应用场景广泛。
-