CN109769195A - 一种hrtf中垂面方位增强方法 - Google Patents

一种hrtf中垂面方位增强方法 Download PDF

Info

Publication number
CN109769195A
CN109769195A CN201910201711.8A CN201910201711A CN109769195A CN 109769195 A CN109769195 A CN 109769195A CN 201910201711 A CN201910201711 A CN 201910201711A CN 109769195 A CN109769195 A CN 109769195A
Authority
CN
China
Prior art keywords
orientation
itd
hrtf
azimuth
indicate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910201711.8A
Other languages
English (en)
Other versions
CN109769195B (zh
Inventor
曾向阳
路东东
黄婉秋
王蕾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Northwestern Polytechnical University
Original Assignee
Northwestern Polytechnical University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Northwestern Polytechnical University filed Critical Northwestern Polytechnical University
Publication of CN109769195A publication Critical patent/CN109769195A/zh
Application granted granted Critical
Publication of CN109769195B publication Critical patent/CN109769195B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S1/00Two-channel systems
    • H04S1/002Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S1/00Two-channel systems
    • H04S1/002Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H04S1/005For headphones

Abstract

本发明提供了一种HRTF中垂面方位增强方法,涉及声源领域,本发明在知晓正前方或正后方方位与最邻近方位角的ITD后,应用插值法获得头部与正前方或正后方偏差为1°时的ITD,应用该ITD对原始HRTF进行改造,获得新的HRTF,本发明合成的HRTF在频谱上与原始HRTF没有差异,但应用该HRTF可使得听者对方位定位效果有所增强。本发明在不改变原有信号频谱的基础上,对易混淆的方位的ITD进行补偿,应用该补偿获得的HRTF与干音频信号进行卷积,合成的信号方位感良好,能有效提升人耳前后方位听觉感知。

Description

一种HRTF中垂面方位增强方法
技术领域
本发明涉及声源领域,尤其是一种HRTF的方位增强方法。
背景技术
早期的研究认为听觉定位最重要的依据是两耳之间声音信号的差异,这也是双工理论的基本思想。如果声源到双耳的距离不同,从声源发出的直达声波到达双耳时,一般有一个先后的顺序。例如声源离头部的右侧比较近时,直达声波会先传到右耳,然后经过头部的绕射到达左耳。这个过程会形成声波到达双耳的微小时间差异,称为耳间时间差(ITD),同时由于头部的阻隔使得声波传递到左耳时发生衰减,强度减弱,与声源距离近1的耳朵听到的声音强度要比距离远的耳朵听到的大,形成耳间强度差 (I0LD)。一般ITD和ILD也被称作为双耳特征。
在中垂面上,声源到达双耳的时间差ITD及双耳声级差均相同,此时,应用双工理论进行定位的方法不再可行。文献“Improvement of front-back sound localizationcharacteristics in headphone-based 3D sound generation.In the 7thInternational Conference on Advanced Communication Technology,2005,ICACT2005.”提供了一种对前、后方位进行增强的方法来实现前后方的定位,该方法应用谱差法来实现前后定位。然而该方法改变了原始HRTF信号的频谱。通过分析HRTF与生理参数的相关性可知,影响(0°,0°)处HRTF的生理参数与影响(180°,0°)的生理参数不同,分析应用谱减法进行的方位增强与生理参数的相关性可知,与未经过方位增强的HRTF相比,应用该方法后的HRTF的相关的生理参数发生了改变。这与实际的情形不一致。从听觉感知上该方法是可行的,但从物理意义上来讲,该方法无法解释清楚。
发明内容
为了克服现有技术的不足,本发明主要通过一种新的方法来实现方位增强。
本发明解决其技术问题所采用的技术方案的步骤如下:
步骤一:应用10%上升沿法分别获得需要增强的方位角(θ0,φ))以及与其同俯仰角下相邻方位角(θ1,φ)的ITD;其中,(θ0,φ)表示俯仰角为φ方位角为θ0时需要增强的方位,(θ1,φ)表示俯仰角为φ时与方位角θ0最相邻的测试数据库中的方位角θ1的方位,从而得到:
ITDlead(θ,φ)=tL,η-tR,η (1)
其中,ITDlead(θ,φ)表示方位角(θ,φ)处的双耳时间差;tL,η,tR,η分别表示左、右耳的 HRIR第一次超过HRIR最大幅值百分比η的起始时间;
步骤二:通过插值方法获得在方位角为与需要增强的方位角1°偏差下的ITD:
其中,为需要增强的方位(θ0,φ)的ITD;为与增强方位最邻近的方位(θ1,φ)的ITD;表示方位角为θ0+1,俯仰角为φ处的双耳时间差,θ0+1表示比方位角θ0大1°的方位;
步骤三:对方位角(θ0,φ)处的ITD进行补偿,补偿后(θ0,φ)处双耳时间差为
步骤四:对(θ0,φ)处的HRTF进行如下改造:
若选择的最邻近的方位(θ1,φ)位于(θ0,φ)的左侧,则在方位角(θ0,φ)处左耳HRIR 在左侧进行补零;同时为保证左右耳长度一致,在右耳HRIR的右侧进行补零,改造后的HRIR为
其中,表示改造后方位角为(θ0,φ)处右耳头相关传递函数;表示改造后方位角为(θ0,φ)处左耳头相关传递函数;表示行1 列的全零阵列;R表示右耳,L表示左耳;
若选择的最邻近的方位位于待增强方位的右侧,则补零方式为:
将改造后的设置为该被试在方位为θ0,俯仰角为φ的头相关传递函数,应用该头相关传递函数与干信号进行卷积可获得具有良好方位感的音频信号,该技术可以实现方位为θ0,俯仰角为φ处的方位增强。
本发明的有益效果是在不改变原有信号频谱的基础上,对易混淆的方位的ITD进行补偿,应用该补偿获得的HRTF与干音频信号进行卷积,合成的信号方位感良好,能有效提升人耳前后方位听觉感知。
附图说明
图1为本发明中垂面方位增强流程图。
图2为本发明具体实施例中原始信号频域图。
图3为本发明具体实施例中应用方位增强后的频域图。
具体实施方式
下面结合附图和实施例对本发明进一步说明,以方位角(0°,0°)为例。
为了克服现有技术的不足,本发明主要通过试图发明一种新的方法来实现方位增强。本发明从头部微小转动能够帮助实现前后位置处的方位增强处获得了灵感。由于在水平方位上,人耳能够识别的方位为3.6°,故人耳很难清晰的分辨出(0°,0°)与(0°, 1°);同时,(0°,0°)方位处的HRTF本身就是反映人耳对正前方声音的听觉感知,但由于听觉感知本身的影响,使得听出来的声音位于头部中心处。本发明专利在知晓正前方或正后方方位与最邻近方位角的ITD,应用插值法获得头部与正前方或正后方偏差为1°时的ITD,应用该ITD对原始HRTF进行改造,获得新的HRTF。该方法合成的 HRTF在频谱上与原始HRTF没有差异,但应用该HRTF可使得听者对方位定位效果有所增强。
由于通过谱差法获得的方位增强算法虽能增强听者的方位感,但应用该方法获得的前后方位的谱,实际上已经改变了影响频谱的生理因素,这与通过测量获得的HRTF 已经是两个完全不同的HRTF。本发明专利在不改变HRTF频谱的基础上提出一种新的方位增强算法,使得听者能够准确区分信号来源。
本发明解决其技术问题所采用的技术方案的步骤如下:
步骤一:应用10%上升沿法分别获得需要增强的方位角(θ0,φ))以及与其同俯仰角下相邻方位角(θ1,φ)的ITD;其中,(θ0,φ)表示俯仰角为φ方位角为θ0时需要增强的方位,(θ1,φ)表示俯仰角为φ时与方位角θ0最相邻的测试数据库中的方位角θ1的方位,从而得到:
ITDlead(θ,φ)=tL,η-tR,η (1)
其中,ITDlead(θ,φ)表示方位角(θ,φ)处的双耳时间差;tL,η,tR,η分别表示左、右耳的HRIR第一次超过HRIR最大幅值百分比η的起始时间;其中,本发明η取10%。
步骤二:通过插值方法获得在方位角为与需要增强的方位角1°偏差下的ITD:
其中,为需要增强的方位(θ0,φ)的ITD;为与增强方位最邻近的方位(θ1,φ)的ITD;表示方位角为θ0+1,俯仰角为φ处的双耳时间差,θ0+1表示比方位角θ0大1°的方位;
步骤三:对方位角(θ0,φ)处的ITD进行补偿,补偿后(θ0,φ)处双耳时间差为
步骤四:对(θ0,φ)处的HRTF进行如下改造:
若选择的最邻近的方位(θ1,φ)位于(θ0,φ)的左侧,则在方位角(θ0,φ)处左耳HRIR 在左侧进行补零;同时为保证左右耳长度一致,在右耳HRIR的右侧进行补零,改造后的HRIR为
其中,表示改造后方位角为(θ0,φ)处右耳头相关传递函数;表示改造后方位角为(θ0,φ)处左耳头相关传递函数;表示行1 列的全零阵列;R表示右耳,L表示左耳;
若选择的最邻近的方位位于待增强方位的右侧,则补零方式为:
将改造后的HR~IR设置为该被试在方位为θ0,俯仰角为φ的头相关传递函数,应用该头相关传递函数与干信号进行卷积可获得具有良好方位感的音频信号,该技术可以实现方位为θ0,俯仰角为φ处的方位增强。
实施例如下:
步骤一:参照图1,应用10%上升沿法分别获得方位(0°,0°)以及与其同俯仰角下相邻方位角(5°,0°)处的ITD:
ITDlead(θ,φ)=tL,10%-tR,10% (5)
其中,ITDlead(θ,φ)表示方位角(θ,φ)处的双耳时间差;tL,10%、tR,10%分别表示左、右耳的HRIR第一次超过其幅值最大值的10%时的起始时间。
步骤二:通过插值方法获得在方位角为与需要增强的方位角1°偏差即(1°,0°) 下的ITD。
其中,ITD(0°,0°)为需要增强的方位(0°,0°)处的ITD,ITD(5°,0°)为与增强方位最邻近的方位的ITD,在本发明中所用的数据库的最邻近方位为(5°,0°)。
步骤三:对方位角(0°,0°)处的ITD进行补偿。补偿后(0°,0°)处双耳时间差为
步骤四:对(0°,0°)处的HRTF进行改造。
若选择的最邻近的方位(5°,0°),位于(0°,0°)的右侧,则对方位角(θ0,φ)处右耳HRIR 在左侧进行补零;同时为保证左右耳长度一致在右耳HRIR的右侧进行补零。HR~IR为改造完成的HRIR。
其中,表示改造后方位角为(0°,φ°)处右耳头相关传递函数;表示改造后方位角为(0°,0°)处左耳头相关传递函数;表示行,1列的全零阵列;(0°,0°)为需要增强的方位角,R表示右耳,L表示左耳。
应用本发明方法重构的方位为(0°,0°)处的HRTF与测量获得的HRTF相比具有更好的方位感。
由图2与图3可知,应用本发明提出的方法进行方位增强后,方位增强后的频域图与原始信号的频域图没有改变。

Claims (1)

1.一种HRTF中垂面方位增强方法,其特征在于包括下述步骤:
步骤一:应用10%上升沿法分别获得需要增强的方位角(θ0,φ))以及与其同俯仰角下相邻方位角(θ1,φ)的ITD;其中,(θ0,φ)表示俯仰角为φ方位角为θ0时需要增强的方位,(θ1,φ)表示俯仰角为φ时与方位角θ0最相邻的测试数据库中的方位角θ1的方位,从而得到:
ITDlead(θ,φ)=tL,η-tR,η (1)
其中,ITDlead(θ,φ)表示方位角(θ,φ)处的双耳时间差;tL,η,tR,η分别表示左、右耳的HRIR第一次超过HRIR最大幅值百分比η的起始时间;
步骤二:通过插值方法获得在方位角为与需要增强的方位角1o偏差下的ITD:
其中,为需要增强的方位(θ0,φ)的ITD;为与增强方位最邻近的方位(θ1,φ)的ITD;表示方位角为θ0+1,俯仰角为φ处的双耳时间差,θ0+1表示比方位角θ0大1°的方位;
步骤三:对方位角(θ0,φ)处的ITD进行补偿,补偿后(θ0,φ)处双耳时间差为
步骤四:对(θ0,φ)处的HRTF进行如下改造:
若选择的最邻近的方位(θ1,φ)位于(θ0,φ)的左侧,则在方位角(θ0,φ)处左耳HRIR在左侧进行补零;同时为保证左右耳长度一致,在右耳HRIR的右侧进行补零,改造后的HRIR为
其中,表示改造后方位角为(θ0,φ)处右耳头相关传递函数;表示改造后方位角为(θ0,φ)处左耳头相关传递函数;表示行1列的全零阵列;R表示右耳,L表示左耳;
若选择的最邻近的方位位于待增强方位的右侧,则补零方式为:
将改造后的设置为该被试在方位为θ0,俯仰角为φ的头相关传递函数,应用该头相关传递函数与干信号进行卷积可获得具有良好方位感的音频信号,该技术可以实现方位为θ0,俯仰角为φ处的方位增强。
CN201910201711.8A 2018-07-26 2019-03-18 一种hrtf中垂面方位增强方法 Active CN109769195B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201810834254.1A CN109005496A (zh) 2018-07-26 2018-07-26 一种hrtf中垂面方位增强方法
CN2018108342541 2018-07-26

Publications (2)

Publication Number Publication Date
CN109769195A true CN109769195A (zh) 2019-05-17
CN109769195B CN109769195B (zh) 2020-04-03

Family

ID=64596349

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201810834254.1A Withdrawn CN109005496A (zh) 2018-07-26 2018-07-26 一种hrtf中垂面方位增强方法
CN201910201711.8A Active CN109769195B (zh) 2018-07-26 2019-03-18 一种hrtf中垂面方位增强方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201810834254.1A Withdrawn CN109005496A (zh) 2018-07-26 2018-07-26 一种hrtf中垂面方位增强方法

Country Status (1)

Country Link
CN (2) CN109005496A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110493701A (zh) * 2019-07-16 2019-11-22 西北工业大学 基于稀疏主成分分析的hrtf个人化方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113079452B (zh) * 2021-03-30 2022-11-15 腾讯音乐娱乐科技(深圳)有限公司 音频处理方法、音频方位信息生成方法、电子设备及介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1466401A (zh) * 2002-07-02 2004-01-07 矽统科技股份有限公司 立体音效的产生方法
WO2008106680A2 (en) * 2007-03-01 2008-09-04 Jerry Mahabub Audio spatialization and environment simulation
WO2010012478A2 (en) * 2008-07-31 2010-02-04 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Signal generation for binaural signals
CN104205878A (zh) * 2012-03-23 2014-12-10 杜比实验室特许公司 用于通过头相关传输函数的线性混合生成头相关传输函数的方法及系统
CN106416301A (zh) * 2014-03-28 2017-02-15 三星电子株式会社 用于渲染声学信号的方法和设备以及计算机可读记录介质
CN106797524A (zh) * 2014-06-26 2017-05-31 三星电子株式会社 用于渲染声学信号的方法和装置及计算机可读记录介质
US20170223475A1 (en) * 2014-10-16 2017-08-03 Huawei Technologies Co., Ltd. Sound image direction sense processing method and apparatus
US10142761B2 (en) * 2014-03-06 2018-11-27 Dolby Laboratories Licensing Corporation Structural modeling of the head related impulse response

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1466401A (zh) * 2002-07-02 2004-01-07 矽统科技股份有限公司 立体音效的产生方法
WO2008106680A2 (en) * 2007-03-01 2008-09-04 Jerry Mahabub Audio spatialization and environment simulation
WO2010012478A2 (en) * 2008-07-31 2010-02-04 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Signal generation for binaural signals
CN104205878A (zh) * 2012-03-23 2014-12-10 杜比实验室特许公司 用于通过头相关传输函数的线性混合生成头相关传输函数的方法及系统
US10142761B2 (en) * 2014-03-06 2018-11-27 Dolby Laboratories Licensing Corporation Structural modeling of the head related impulse response
CN106416301A (zh) * 2014-03-28 2017-02-15 三星电子株式会社 用于渲染声学信号的方法和设备以及计算机可读记录介质
CN106797524A (zh) * 2014-06-26 2017-05-31 三星电子株式会社 用于渲染声学信号的方法和装置及计算机可读记录介质
US20170223475A1 (en) * 2014-10-16 2017-08-03 Huawei Technologies Co., Ltd. Sound image direction sense processing method and apparatus

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
SANG JIN CHO: "Front-Back Confusion Resolution in 3D Sound localization with HRTF Databases", 《2006 INTERNATIONAL FORUM ON STRATEGIC TECHNOLOGY》 *
曾向阳: "头相关传递函数的个人化方法", 《立体声与环绕声》 *
钟小丽: "利用神经网络外推中垂面上低仰角HRTF的方法", 《华南理工大学学报》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110493701A (zh) * 2019-07-16 2019-11-22 西北工业大学 基于稀疏主成分分析的hrtf个人化方法
CN110493701B (zh) * 2019-07-16 2020-10-27 西北工业大学 基于稀疏主成分分析的hrtf个人化方法

Also Published As

Publication number Publication date
CN109005496A (zh) 2018-12-14
CN109769195B (zh) 2020-04-03

Similar Documents

Publication Publication Date Title
CN107102296B (zh) 一种基于分布式麦克风阵列的声源定位系统
Bernschütz et al. Binaural reproduction of plane waves with reduced modal order
CN102438189B (zh) 基于双通路声信号的声源定位方法
Zahorik Perceptually relevant parameters for virtual listening simulation of small room acoustics
CN104464750B (zh) 一种基于双耳声源定位的语音分离方法
CN102565759B (zh) 一种基于子带信噪比估计的双耳声源定位方法
US20090304203A1 (en) Method and device for binaural signal enhancement
CN109769195A (zh) 一种hrtf中垂面方位增强方法
US8693713B2 (en) Virtual audio environment for multidimensional conferencing
CN107346664A (zh) 一种基于临界频带的双耳语音分离方法
CN107820158B (zh) 一种基于头相关脉冲响应的三维音频生成装置
Pörschmann et al. Binauralization of omnidirectional room impulse responses-algorithm and technical evaluation
Youssef et al. A binaural sound source localization method using auditive cues and vision
Talagala et al. Binaural sound source localization using the frequency diversity of the head-related transfer function
CN108122559A (zh) 一种数字助听器中基于深度学习的双耳声源定位方法
Monaghan et al. A method to enhance the use of interaural time differences for cochlear implants in reverberant environments
CN107049309A (zh) 听觉脑干诱发电位检测方法及装置
Rothbucher et al. Comparison of head-related impulse response measurement approaches
Hoffbauer et al. Four-directional ambisonic spatial decomposition method with reduced temporal artifacts
KR20130109615A (ko) 가상 입체 음향 생성 방법 및 장치
Zohourian et al. Binaural direct-to-reverberant energy ratio and speaker distance estimation
Treeby et al. The effect of hair on auditory localization cues
Fallahi et al. High spatial resolution binaural sound reproduction using a virtual artificial head
Plaskota et al. Practical aspects of using HRTF measuring device
Lu et al. 3D sound effect enhancement of front and back

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant