一种基于角度映射表的虚拟声重放方法、电子设备及介质

    公开(公告)号:CN109618274B

    公开(公告)日:2021-02-19

    申请号:CN201811406368.2

    申请日:2018-11-23

    Abstract: 本发明公开了一种基于角度映射表的虚拟声重放方法、电子设备及介质,所述方法包括步骤:步骤1、输入拟重放的目标虚拟声像的距离和空间方位角度;步骤2、检索角度映射表,提取出匹配空间方位角度;步骤3、从基准距离的HRTF数据库中提取出与匹配空间方位角度对应的HRTF数据,作为目标虚拟声像的匹配HRTF;步骤4、采用匹配HRTF对拟重放的单通路声信号进行滤波,获得双耳重放信号,进一步馈给耳机或扬声器重放。本发明基于单个距离(即基准距离)的HRTF数据,可实现任意多个距离的虚拟声像重放,降低了对硬件设备的存储要求。

    一种基于角度映射表的虚拟声重放方法、电子设备及介质

    公开(公告)号:CN109618274A

    公开(公告)日:2019-04-12

    申请号:CN201811406368.2

    申请日:2018-11-23

    Abstract: 本发明公开了一种基于角度映射表的虚拟声重放方法、电子设备及介质,所述方法包括步骤:步骤1、输入拟重放的目标虚拟声像的距离和空间方位角度;步骤2、检索角度映射表,提取出匹配空间方位角度;步骤3、从基准距离的HRTF数据库中提取出与匹配空间方位角度对应的HRTF数据,作为目标虚拟声像的匹配HRTF;步骤4、采用匹配HRTF对拟重放的单通路声信号进行滤波,获得双耳重放信号,进一步馈给耳机或扬声器重放。本发明基于单个距离(即基准距离)的HRTF数据,可实现任意多个距离的虚拟声像重放,降低了对硬件设备的存储要求。

    一种基于听觉模型和信源方位的多通路语音降噪方法

    公开(公告)号:CN111210835B

    公开(公告)日:2023-07-18

    申请号:CN202010018821.3

    申请日:2020-01-08

    Abstract: 本发明公开一种基于听觉模型和信源方位的多通路语音降噪方法。该方法将多通路带噪语音信号进行通路分离,导入听觉模型映射成为各个独立通路的语谱灰度图;将语谱灰度图输入方向识别神经网络模型,得到各个独立通路的语声信源的方位;进一步,将语谱灰度图导入相应信源方位的降噪神经网络,降噪神经网络对语谱图有语音部分与无语音部分实施分区降噪处理;将各个独立通路的降噪后语谱图进行逆变换,再进行通路合并,最终获得降噪后的多通路语音信号。本方法利用人类听觉模型将带噪语音信号映射到初级感知域进行处理,更加符合人类生理感知;此外,对不同空间方位的语声信源实施分区域个性化降噪策略,有助于提高降噪的精准度。

    一种远程声场实时虚拟重现的方法与装置

    公开(公告)号:CN111246345B

    公开(公告)日:2021-09-21

    申请号:CN202010019188.X

    申请日:2020-01-08

    Abstract: 本发明公开一种远程声场实时虚拟重现的方法与装置。该方法包括:(1)采用端对端的卷积神经网络,由用户耳部图像推知个性化的仰角定位因素,并以此为依据对通用HRTF进行个性化定制,进一步将定制的个性化HRTF应用于双耳虚拟声信号的合成;(2)基于用户头部位置的实时检测,实现跟踪头部位置的动态双耳虚拟声信号的重放。上述个性化定制和实时动态的虚拟声信号处理方法可以增强用户的现场感和沉浸感。所述装置包括远程声场多通路捡拾模块、云处理模块、用户端模块和5G通讯模块。本发明的实施基于云计算技术和5G网络传输,可有效减轻用户端的运算负荷,满足多用户的并行需求。本发明可视为基于移动便携设备的虚拟现实的声模块方案。

    一种远程声场实时虚拟重现的方法与装置

    公开(公告)号:CN111246345A

    公开(公告)日:2020-06-05

    申请号:CN202010019188.X

    申请日:2020-01-08

    Abstract: 本发明公开一种远程声场实时虚拟重现的方法与装置。该方法包括:(1)采用端对端的卷积神经网络,由用户耳部图像推知个性化的仰角定位因素,并以此为依据对通用HRTF进行个性化定制,进一步将定制的个性化HRTF应用于双耳虚拟声信号的合成;(2)基于用户头部位置的实时检测,实现跟踪头部位置的动态双耳虚拟声信号的重放。上述个性化定制和实时动态的虚拟声信号处理方法可以增强用户的现场感和沉浸感。所述装置包括远程声场多通路捡拾模块、云处理模块、用户端模块和5G通讯模块。本发明的实施基于云计算技术和5G网络传输,可有效减轻用户端的运算负荷,满足多用户的并行需求。本发明可视为基于移动便携设备的虚拟现实的声模块方案。

    一种基于听觉模型和信源方位的多通路语音降噪方法

    公开(公告)号:CN111210835A

    公开(公告)日:2020-05-29

    申请号:CN202010018821.3

    申请日:2020-01-08

    Abstract: 本发明公开一种基于听觉模型和信源方位的多通路语音降噪方法。该方法将多通路带噪语音信号进行通路分离,导入听觉模型映射成为各个独立通路的语谱灰度图;将语谱灰度图输入方向识别神经网络模型,得到各个独立通路的语声信源的方位;进一步,将语谱灰度图导入相应信源方位的降噪神经网络,降噪神经网络对语谱图有语音部分与无语音部分实施分区降噪处理;将各个独立通路的降噪后语谱图进行逆变换,再进行通路合并,最终获得降噪后的多通路语音信号。本方法利用人类听觉模型将带噪语音信号映射到初级感知域进行处理,更加符合人类生理感知;此外,对不同空间方位的语声信源实施分区域个性化降噪策略,有助于提高降噪的精准度。

    一种基于听觉匹配的虚拟声定制方法及装置

    公开(公告)号:CN111246363B

    公开(公告)日:2021-07-20

    申请号:CN202010019433.7

    申请日:2020-01-08

    Abstract: 本发明公开了一种基于听觉匹配的虚拟声定制方法及装置。本发明的方法包括:从用户头部3D模型中提取HRTF相关的生理特征值;输入听觉评估神经网络,预测听觉分数;从已知HRTF数据库中挑选出最高听觉分数所对应的HRTF数据,作为用户听觉匹配的HRTF数据;将原始单通路信号、听觉匹配HRTF数据、房间脉冲响应依次进行时间域卷积处理或等价地频率域滤波处理,得到用户定制的双耳虚拟声信号。本发明利用现有移动终端的3D传感装置,涵盖了HRTF相关的生理特征量;同时,直接建立生理特征值和主观听感的非线性关系,提高了HRTF匹配以及虚拟声定制的精度,有助于降低虚拟声重放设备的定位误差、提高用户沉浸感。

    一种基于听觉匹配的虚拟声定制方法及装置

    公开(公告)号:CN111246363A

    公开(公告)日:2020-06-05

    申请号:CN202010019433.7

    申请日:2020-01-08

    Abstract: 本发明公开了一种基于听觉匹配的虚拟声定制方法及装置。本发明的方法包括:从用户头部3D模型中提取HRTF相关的生理特征值;输入听觉评估神经网络,预测听觉分数;从已知HRTF数据库中挑选出最高听觉分数所对应的HRTF数据,作为用户听觉匹配的HRTF数据;将原始单通路信号、听觉匹配HRTF数据、房间脉冲响应依次进行时间域卷积处理或等价地频率域滤波处理,得到用户定制的双耳虚拟声信号。本发明利用现有移动终端的3D传感装置,涵盖了HRTF相关的生理特征量;同时,直接建立生理特征值和主观听感的非线性关系,提高了HRTF匹配以及虚拟声定制的精度,有助于降低虚拟声重放设备的定位误差、提高用户沉浸感。

Patent Agency Ranking