一种视听跨模态融合语音分离方法

    公开(公告)号:CN116469404A

    公开(公告)日:2023-07-21

    申请号:CN202310430709.4

    申请日:2023-04-20

    Abstract: 目前的视听语音分离模型基本是将视频和音频特征进行简单拼接,视觉信息未被充分利用,分离效果不理想。本发明充分考虑视觉和音频特征之间的相互联系,采用多头注意力机制,结合卷积时域分离模型(ConvolutionalTime‑domainAudioSeparationnetwork,Conv‑TasNet)和双路径递归神经网络(Dual‑PathRecurrentNeuralNetwork,DPRNN),提出时域视听跨模态融合语音分离(Conv‑AudiovisualSpeechSeparation,Conv‑AVSS)模型。该模型通过音频编码器与视觉编码器获得音频特征与唇部特征,采用多头注意力机制将视听特征进行跨模态融合,并将其通过DPRNN分离网络,获得不同说话者的分离语音。利用PESQ、STOI及SDR评价指标,在VoxCeleb2数据集进行实验测试。研究表明,当分离二、三或四位说话者的混合语音时,本方法与传统分离网络相比,SDR提高量均在1.87dB以上,最高可达2.29dB。这表明了本方法的有效性。

    联合耳蜗语音特征和跳变深层神经网络的语音增强算法

    公开(公告)号:CN111899750A

    公开(公告)日:2020-11-06

    申请号:CN202010743992.2

    申请日:2020-07-29

    Abstract: 本发明公开了联合耳蜗语音特征和跳变深层神经网络的语音增强算法,采用MMSE为前端的改进MRCG语音特征,通过比较不同特征作为网络输入的语音增强效果;分析DNN与Skip-DNN滤除“音乐噪声”的能力,建立了联合改进MRCG和Skip-DNN的语音增强模型,由实验可知,联合改进MRCG和Skip-DNN的语音增强模型比MRACC与MRCG增强效果好;同时,在低信噪比与非平稳背景噪声环境中,Skip-DNN滤除了部分“音乐噪声”,很好的拟合了改进MRCG与IRM之间复杂的非线性关系,提高低信噪比环境中语音增强效果,获得更清晰的语音特征,可有效提高语音可懂度和语音质量。

    两列平面声波非线性相互作用实验测试系统及方法

    公开(公告)号:CN106768303B

    公开(公告)日:2019-10-01

    申请号:CN201710069114.5

    申请日:2017-02-08

    Abstract: 本发明涉及声波相互作用领域,具体涉及一种两列平面声波非线性相互作用实验测试系统及方法。本发明为解决两列声波相互作用后低频声波能量变化的实验测量问题,提出了湖上实验测量两列平面声波非线性相互作用实验测试系统及方法。本发明的平面声波非线性相互作用实验测试系统包括低频发射系统、高频发射系统、发射架、接收系统、示波器,本发明的平面声波非线性相互作用实验测试方法包括如下步骤:1、安装装置;2、单独发射低频声波,记录数据;3、单独发射高频声波,记录数据;4、同时发射高低频声波,记录数据;5、根据实验数据得到能量变化。本发明解决了两列声波相互作用后低频声波能量变化的测量问题,适用于声波能量的控制领域。

    一种电力线路故障信号诊断装置

    公开(公告)号:CN206557324U

    公开(公告)日:2017-10-13

    申请号:CN201621005888.9

    申请日:2016-08-31

    CPC classification number: Y04S10/522

    Abstract: 本实用新型公开了一种电力线路故障信号诊断装置,电力线路每隔50‑200米设一个环绕在电力线路上的环形磁芯,每个环形磁芯上设有绕组导线,每个绕组导线均与电流数据采集微控制器连接,电流数据采集微控制器上均连接设有GPS定位模块、GSM收发模块,故障诊断监控计算机上的GSM收发模块上设有接收天线,环形磁芯设在屏蔽件内,本实用新型通过在电力线路上布置环形磁芯、绕组导线和电流数据采集微控制器组成的电流采集组件,可实时采集线路的电流,一旦线路出现故障,只需通过故障诊断监控计算机即可读取出该故障处的GPS位置,诊断效率极大的提高,屏蔽件提高了电流采集的抗干扰性,采用太阳能板供电,保证了即使电路线路故障时,诊断设备也能正常运行。

    一种基于WiFi的混沌保密通信系统

    公开(公告)号:CN205754368U

    公开(公告)日:2016-11-30

    申请号:CN201620539262.X

    申请日:2016-06-06

    Abstract: 本实用新型公开了一种基于WiFi的混沌保密通信系统,其包括语音采集电路、混沌加密电路、WiFi发送电路、WiFi接收电路、混沌解密电路和语音播放电路,语音采集电路与所述混沌加密电路连接,混沌加密电路与WiFi发送电路连接,混沌解密电路与WiFi接收电路连接,混沌解密电路与语音播放电路连接,本实用新型通过设置降压电路和增压电路,对要传输的混沌信号进行振幅缩小使其适合无线传输模块进行传输,有效的解决了无线发送模块信号幅值在几十毫伏到1V之间,而混沌信号的幅值大约为2.5V,导致出现的不匹配现象,降低烧坏无线传输模块的概率,提高了系统的使用寿命,同时,降低了其失真率。

    微气泡发生电极和装置及气泡谐振频率的测量装置

    公开(公告)号:CN205748623U

    公开(公告)日:2016-11-30

    申请号:CN201620167127.7

    申请日:2016-03-04

    Abstract: 微气泡发生电极和装置及气泡谐振频率的测量装置,属于水声领域。在所述导电棒两端加入直流电压,电解水的过程中产生和气泡,形成气泡群,根据气泡浓度的要求,对导电棒的个数或排放方式进行合理设计,气泡在水介质中近似为正态分布,根据声波在水中传播其发射频率与气泡谐振频率相同时声波衰减最大的原理,利用水听器对有无气泡存在条件下接收到的声波幅值做差,幅度差值最大处或最大的某个范围内的比较大的差值频点或者范围,进而求得气泡的谐振频率范围,据此完成水池中简易气泡发生装置的设计和谐振频率装置的设计。简化电解水产生气泡的装置,并且简化测量气泡谐振频率的装置。

    一种运动目标检测机构
    27.
    实用新型

    公开(公告)号:CN204463231U

    公开(公告)日:2015-07-08

    申请号:CN201520115124.4

    申请日:2015-02-25

    Abstract: 本实用新型公开了一种运动目标检测机构,它涉及运动目标检测技术领域,壳体的底部安装有底座,壳体的侧面安装有操作机构,壳体内部的顶端安装有旋转电机,旋转电机的转轴上安装有支撑板,支撑板底部的两端均安装有支撑滚轮,支撑板的上端通过安装架安装有电动滑轨机构,电动滑轨机构的滑块上安装有安装板,安装板上分别安装有红外扫描机构、摄像头,操作机构、红外扫描机构、摄像头均与处理器的输入端连接,处理器的输出端分别与旋转电机、电动滑轨机构连接,电源模块与处理器的电源端连接,处理器的存储端与存储器连接,处理器的读取端与时钟模块连接;本实用新型便于实现快速调节,延长使用寿命,操作简便,节省时间,使用方便。

    基于FPGA的DDS信号发生器
    28.
    实用新型

    公开(公告)号:CN204131478U

    公开(公告)日:2015-01-28

    申请号:CN201420656315.7

    申请日:2014-11-05

    Abstract: 基于FPGA的DDS信号发生器,涉及DDS信号发生器,本实用新型为了解决目前基于DDS芯片的信号发生器存在输出波形固定、缺乏远程控制及灵活性差的问题,本实用新型包括远程输入、蓝牙模块、32位累加器、ROM、数模转换电路、电流转电压电路、二阶有源低通滤波器和幅度调节电路,远程输入与蓝牙模块无线通信,蓝牙模块与32位累加器连通,32位累加器与ROM连通,ROM的输出端与数模转换电路连通,数模转换电路与电流转电压电路连通,电流转电压电路的输出端与二阶有源低通滤波器连通,二阶有源低通滤波器的输出端与幅度调节电路连通,幅度调节电路的输出端为DDS信号发生器的输出端。本实用新型适用于DDS信号发生器。

    基于FPGA的主动噪声控制装置

    公开(公告)号:CN213483395U

    公开(公告)日:2021-06-18

    申请号:CN202022565416.1

    申请日:2020-11-09

    Abstract: 基于FPGA的主动噪声控制装置,属于降噪技术领域,本实用新型为解决现有降噪技术为了承载复杂算法而存在系统结构复杂、成本高的问题。本实用新型包括声学传感器、误差信号采集单元、扬声器、数/模转换模块、电源供给单元和FPGA;声学传感器采级初级源噪声信号给FPGA;误差信号采集单元采集误差信号给FPGA;FPGA处理后通过扬声器输出次级源噪声信号;电源供给单元提供3.3V和1.2V工作电源。本实用新型用于主动降噪。

    一种单片机芯片焊接装置
    30.
    实用新型

    公开(公告)号:CN210125858U

    公开(公告)日:2020-03-06

    申请号:CN201921070926.2

    申请日:2019-07-09

    Abstract: 本实用新型涉及焊接装置领域,特别是涉及一种单片机芯片焊接装置,包括底架和固定架,还包括锁定机构、左右滑动架和顶紧机构,所述的底架包括底板、支腿、支撑侧板、安装座、横孔和竖孔,所述的固定架包括固定板、固定槽、滑动方杆、弹簧、挡板、转套、旋转齿轮、限位板和拉手,所述的锁定机构包括锁块、转杆、控制板和锁定弹簧,所述的左右滑动架包括滑动横杆、T形滑槽和滑槽挡板,所述的顶紧机构包括T形滑块、圆板、支撑杆、顶紧弹簧、堵板、拉动框和顶紧座,本实用新型能够将电路板固定,便于芯片在电路板上的焊接。

Patent Agency Ranking