-
公开(公告)号:CN116110417A
公开(公告)日:2023-05-12
申请号:CN202211595644.0
申请日:2022-12-13
Applicant: 浙江大学
Abstract: 本发明公开了一种面向超声波声纹防伪的数据增强方法及装置,通过手机麦克风与扬声器采集混合了超声波信号和语音信号的原始音频样本,并获得一个原始采集设备的脉冲响应(ImpulseResponse)以及至少一个目标设备脉冲响应等步骤。本发明的数据增强方法结合了维纳反卷积技术,在利用目标设备脉冲响应进行卷积增强前,减弱了原始采集设备频率响应特性和环境噪声的干扰,使得增强后的音频样本更加接近通过目标设备实际采集的音频样本,可作为一种有效的模拟数据来进行模型训练,通过原始采集设备和目标设备的脉冲响应数据,将原始设备采集的数据集增强为目标设备采集的数据集,进而能使算法适应目标设备的频率响应特性,提升防伪效果。
-
公开(公告)号:CN115208507A
公开(公告)日:2022-10-18
申请号:CN202210996591.7
申请日:2022-08-19
Applicant: 浙江大学
Abstract: 本发明公开了一种基于白盒语音对抗样本的隐私保护方法与装置,基于非目标白盒对抗样本的针对开源语音识别模型的干扰方法,在真实物理世界有效且符合实际应用场景约束,用以实现语音隐私保护;防御方建立语音数据库,针对开源语音识别模型,生成符合实际应用场景约束的非目标白盒对抗样本扰动;基于不同的初始状态,防御方可以生成大量不同块状扰动,从而形成扰动集合,防御方从扰动集合中随机选择扰动进行播放,使监听方无法获取块状扰动波形进而无法去除扰动;叠加了扰动的语音被麦克风录制后无法被模型正确识别,从而保护用户隐私不被泄露,能够生成对人干扰较小的块状扰动,抵御来自于大规模语音识别的隐私泄露。
-
公开(公告)号:CN114822548A
公开(公告)日:2022-07-29
申请号:CN202210423544.3
申请日:2022-04-21
Applicant: 浙江大学
Inventor: 卢立 , 巴钟杰 , 林峰 , 任奎 , 其他发明人请求不公开姓名
Abstract: 本发明公开了一种基于对抗样本的非侵入自适应说话人匿名系统及方法,系统包括多样目标说话人生成模块、任意对任意对抗扰动构造模块和不可感知对抗扰动优化模块,多样目标说话人生成模块根据所输入的目标标签按需生成目标说话人嵌入码,任意对任意对抗扰动构造模块根据所输入的目标说话人嵌入码构造对抗扰动,不可感知对抗扰动优化模块进一步优化所输入的对抗扰动得到人耳不可感知的对抗扰动。本发明可以实现任意对任意的说话人身份转换,将原始用户的声纹信息隐藏在一群目标说话人之中以自适应地躲避自动说话人辨认系统的身份检测,通过预训练的条件变分自编码器按需采样目标嵌入码极大释放了实际部署的计算和存储资源需求。
-
公开(公告)号:CN113362840A
公开(公告)日:2021-09-07
申请号:CN202110615983.X
申请日:2021-06-02
Applicant: 浙江大学
IPC: G10L21/0208 , G10L21/0216 , G10L21/0232 , G10L25/18 , G10L25/27
Abstract: 本发明公开了一种基于内建传感欠采样数据的通用语音信息恢复装置及方法,装置包括信号预处理模块、基频估计模块、频谱重建模块和频谱语音转换模块,信号预处理模块、基频估计模块、频谱重建模块和频谱语音转换模块依次连接,不仅能够恢复带宽极窄且严重混叠的传感器数据中的语音信息,还解决了基于学习的模型迁移性比较差的问题。手机内建传感器在不同的场景下采集的数据有不同的特点,本发明从传感器数据的内在特征与语音信号的特点出发,无需使用数据集进行模型训练,直接构造了一个语音信息恢复系统,且能够适应用户、环境和设备的变化,有效地从手机内建传感器中恢复出隐匿的语音信号。
-
公开(公告)号:CN115208507B
公开(公告)日:2024-12-03
申请号:CN202210996591.7
申请日:2022-08-19
Applicant: 浙江大学
Abstract: 本发明公开了一种基于白盒语音对抗样本的隐私保护方法与装置,基于非目标白盒对抗样本的针对开源语音识别模型的干扰方法,在真实物理世界有效且符合实际应用场景约束,用以实现语音隐私保护;防御方建立语音数据库,针对开源语音识别模型,生成符合实际应用场景约束的非目标白盒对抗样本扰动;基于不同的初始状态,防御方可以生成大量不同块状扰动,从而形成扰动集合,防御方从扰动集合中随机选择扰动进行播放,使监听方无法获取块状扰动波形进而无法去除扰动;叠加了扰动的语音被麦克风录制后无法被模型正确识别,从而保护用户隐私不被泄露,能够生成对人干扰较小的块状扰动,抵御来自于大规模语音识别的隐私泄露。
-
公开(公告)号:CN118918435A
公开(公告)日:2024-11-08
申请号:CN202410952565.3
申请日:2024-07-16
Applicant: 浙江大学
IPC: G06V10/82 , G06N3/0475 , G06N3/045 , G06N3/094 , G06N3/084
Abstract: 本发明公开了一种基于电磁注入的对抗样本生成方法,该方法利用难以察觉的电磁信号作为攻击向量,向摄像头进行电磁注入以实现物理对抗样本。通过对大量物理制约因素的分析以及基于期望转换技术的对抗样本增强,克服了对抗样本物理可实现性不足的问题,有效实现了高有效性的物理对抗样本。本发明无需在场景预部署对抗图案,利用电磁信号直接操纵摄像头的传感器图像,具有隐蔽性高、可实现性强的优势。
-
公开(公告)号:CN118609607A
公开(公告)日:2024-09-06
申请号:CN202410808735.0
申请日:2024-06-21
Applicant: 浙江大学
IPC: G10L25/69 , G10L21/013
Abstract: 本发明公开了一种用于语音转换系统的鲁棒性评估方法,通过字错误率与音色识别精度两种指标,分别对所述加噪输出数据集与干净输出数据集测试得到各自的指标评分,根据评分的退化程度评估该语音转换系统的鲁棒性。因此,发明可以真实地反映出语音转换系统部署落地后能够在实际应用场景下表现出来的性能,为保证与提高语音转换系统的可靠性提供了依据,也有利于未来探索语音转换性能和不同噪声条件之间的深层相关性,可在不用更改其他步骤的情况下方便地评估任意语音转换系统在任意使用场景下的鲁棒性,能够节省人力,并具备较好的可维护性与可拓展性。实现方法简单,手段灵活,通过细粒度地微调噪声参数,覆盖了连续的环境特征。
-
公开(公告)号:CN118157949A
公开(公告)日:2024-06-07
申请号:CN202410268038.0
申请日:2024-03-08
Applicant: 浙江大学
Abstract: 本发明公开了一种基于SeqGAN的车载CAN总线模糊测试方法和装置,包括获取足量的目标车辆正常运行时的CAN数据帧;对每个CAN数据帧,提取并拼接其中的ID字段以及数据域,生成一条完整的CAN消息;将所有的CAN消息作为训练数据,输入并训练模糊测试器;使用训练后的模糊测试器生成一系列模糊消息;根据CAN标准,将模糊消息转化为规范的CAN数据帧,并输入目标车辆,同时监测车辆运行情况是否出现异常,以进行模糊测试。该方法实现了数据驱动的自动化且高效的车载CAN总线模糊测试,能够在生成对IDS具有隐蔽性的合规CAN数据的同时,尽量生成可能导致异常的模糊CAN数据,从而提供真实可靠的车载CAN模糊测试方法。
-
公开(公告)号:CN114783447A
公开(公告)日:2022-07-22
申请号:CN202210423843.7
申请日:2022-04-21
Applicant: 浙江大学
Abstract: 本发明公开了一种基于声纹识别对抗性样本的物理域身份伪装系统及方法,系统包括离线训练部分和在线伪装部分,是一种将扰动与生成过程与施加过程分离的实时流式伪装攻击方法,利用实时音素对齐器和实时音素预测器预测并定位实时语音中的音素,并在音素级别生成细粒度的通用亚音素级对抗扰动,从而使得一次生成的亚音素级对抗性扰动能够实时施加到流式语音中,最终实现适应于真实物理域场景的伪装攻击形式。本发明每次实时同步的平均时间开销为0.11s,这表明本发明的同步机制能够在0.5s的同步间隔下实现良好的实时性能;音素延迟的中位数为50ms,超过75%的音素延迟小于100ms,具有良好的同步性能。
-
公开(公告)号:CN119152862A
公开(公告)日:2024-12-17
申请号:CN202411604235.1
申请日:2024-11-12
Applicant: 浙江大学
IPC: G10L19/018 , G10L25/48 , G10L25/30
Abstract: 本发明公开了一种隐私保护的深度语音数字水印流式嵌入与检测方法,基于端云协同处理环境,有效隔离语音内容中的用户敏感信息与水印信息,同时实现流式嵌入、区间标注、防水印伪造、信道鲁棒等有益效果,支持语音内容版权声明、伪造样本标识等场景,服务第三方水印嵌入和检测应用,在整个水印嵌入阶段,服务器端仅根据水印信息生成通用水印数据,从而避免了用户隐私信息的泄露风险。在检测环节,接收端用户端采用第三深度神经网络对音频内容进行脱敏处理,使得服务器端仅能通过处理后的脱敏数据来推断水印的存在,隔绝了用户原始语音数据与服务器端的直接接触,显著提升了用户隐私保护水平,提高用户与第三方检测平台之间的信任感。
-
-
-
-
-
-
-
-
-