CN106664497A - 音频再现系统和方法 - Google Patents
音频再现系统和方法 Download PDFInfo
- Publication number
- CN106664497A CN106664497A CN201580043758.6A CN201580043758A CN106664497A CN 106664497 A CN106664497 A CN 106664497A CN 201580043758 A CN201580043758 A CN 201580043758A CN 106664497 A CN106664497 A CN 106664497A
- Authority
- CN
- China
- Prior art keywords
- audio content
- microphone
- earphone
- loudspeaker
- environment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R29/00—Monitoring arrangements; Testing arrangements
- H04R29/001—Monitoring arrangements; Testing arrangements for loudspeakers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/301—Automatic calibration of stereophonic sound system, e.g. with test microphone
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S1/00—Two-channel systems
- H04S1/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
- H04S1/005—For headphones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
- H04S7/30—Control circuits for electronic adaptation of the sound field
- H04S7/305—Electronic adaptation of stereophonic audio signals to reverberation of the listening space
- H04S7/306—For headphones
Abstract
本发明提供了一种系统和方法,其包括:将具有内置扬声器的移动装置定位在收听环境中的第一位置处,并且将至少一个麦克风定位在所述收听环境中的至少一个第二位置处;从所述收听环境中的所述第一位置处的所述移动装置的所述扬声器发射测试音频内容;使用所述收听环境中的所述至少一个第二位置处的所述至少一个麦克风来接收由所述扬声器发射的所述测试音频内容;以及至少部分地基于所述接收的测试音频内容,确定在由至少一个耳机回放之前将施加到期望音频内容的一个或多个调整;其中所述第一位置和所述第二位置彼此远离,以使得所述至少一个麦克风位于所述扬声器的近场内。
Description
技术领域
本公开涉及音频再现系统和方法,具体来说涉及具有更高个性化程度的音频再现系统和方法。
背景技术
市场上存在用于通过耳机来双耳回放音频内容的多种算法。所述算法基于合成双耳房间脉冲响应(BRIR),这意味着其基于广义头相关传递函数(HRTF),诸如标准仿真头部或来自大型HRTF数据库的广义函数。此外,一些算法允许用户从一组给定的BRIR选择最合适的BRIR。此类选择可以改善收听质量;它们包括外部化和头外定位,但是信号处理链中缺少个性化(例如,头部遮蔽、肩部反射或耳廓效应)。特别地,耳廓信息是与指纹一样独特的。通过个人BRIR来添加个性化可以增加逼真度。
发明内容
本文所述的方法包括以下过程:将具有内置扬声器的移动装置定位在收听环境中的第一位置处,并且将至少一个麦克风定位在收听环境中的至少一个第二位置处;从收听环境中的第一位置处的移动装置的扬声器发射测试音频内容;使用收听环境中的至少一个第二位置处的至少一个麦克风来接收由扬声器发射的测试音频内容;以及,至少部分地基于接收的测试音频内容,确定在由至少一个耳机回放之前将施加到期望音频内容的一个或多个调整;其中第一位置和第二位置彼此远离,以使得至少一个麦克风位于扬声器的近场内。
用于测量双耳房间脉冲响应的系统包括:设置在收听环境中的第一位置处的具有内置扬声器的移动装置、以及设置在收听环境中的至少一个第二位置处的至少一个麦克风。移动装置被配置来通过位于收听环境中的第一位置处的扬声器发射测试音频内容,并且从耳机接收测试音频内容,所述测试音频内容由扬声器发射并且由位于收听环境中的至少一个第二位置处的耳机接收。移动装置还被配置来至少部分地基于接收的音频内容,确定在由耳机回放之前将由移动装置施加到期望音频内容的一个或多个调整,其中第一位置和第二位置彼此远离,以使得至少一个麦克风位于扬声器的近场内。
在查阅以下详细描述和附图时,其他系统、方法、特征和优点对于本领域技术人员将是或将变得明显。意图是,所有此类额外系统、方法、特征和优点包括于本说明书内,包括于本发明的范围内,并且受随附权利要求书保护。
附图说明
可参考以下描述和附图更好地理解系统。附图中的部件不一定按比例绘制,而是强调示出本发明的原理。此外,在附图中,相同参考数字在所有不同视图中指示对应的部分。
图1是用于双声道立体声信号、5.1声道立体声信号或7.1声道立体声信号的双耳回放的示例性音频系统的示意图。
图2是用于使用智能电话和移动麦克风记录器来测量BRIR的示例性系统的示意图。
图3是用于使用智能电话和头戴式耳机麦克风来测量BRIR的另一个示例性系统的示意图。
图4是用于使用智能电话来测量BRIR的示例性方法的流程图。
图5是示出不同激励(stimuli)的频率响应的图。
图6是示出后智能电话扬声器的频率响应(从近场测量获得)、示例性目标频率响应和逆滤波器的图。
图7是头戴式耳机真实房间系统中的BRIR测量的示例性应用的流程图。
图8是用于计算逆滤波器以便校正智能电话扬声器缺陷的示例性方法的流程图。
图9是示出在智能电话扬声器缺陷的校正之前和之后的频率响应的比较的图。
图10是示例性频谱平衡器算法的流程图。
图11是用于测量耳机特性的示例性设备的示意图。
图12是示例性耳机均衡器算法的流程图。
图13是头戴式耳机虚拟房间系统中的BRIR测量的示例性应用的流程图。
图14是在去混响器中使用的加窗函数的图。
图15是在施加图14所示的加窗函数之前和之后的BRIR的图。
图16是示出各种示例性测量的BRIR的幅值响应的比较的图。
图17是示出形成图16所示的图的基础的示例性测量的BRIR的相位响应的比较的图。
图18是示出用作麦克风的耳机换能器的幅值响应的图。
具体实施方式
通常通过五个、六个、七个或更多个扬声器来递送记录的“环绕声”。真实世界声音从无限多个位置到达用户(在本文中也被称为“听众”,特别是当就其声学感知而论时)。尽管人类听觉系统是双声道系统,但是听众容易感知在三维空间的所有轴上的方向。进入人类听觉系统的一个路线是通过头戴式耳机(在本文中也被称为“耳机”,特别是就相对于每个单独耳朵的声学特性而论时)。头戴式耳机的弱点是它们无法在三维中创建宽敞和完全准确的声波像。由于头戴式耳机原则上能够提供像真实房间中的多个扬声器所创建的声波体验一样完全宽敞、精确定位和生动的声波体验,所以一些“虚拟环绕”处理器在这方面已经取得渐进的进步。
来自各种方向的声音由于其遇到头部和上躯干的形状和尺寸以及外耳(耳廓)的形状而更改。人类大脑对不可感知为音调更改的这些修改高度敏感;相反,它们被听众相当准确地体验为向上、向下、前、后或在中间定域。此声学更改可以由HRTF表示。
一种类型的录音已经认识到两个音频声道可以重建三维体验。双耳效应录音通过单对紧密间隔的麦克风来进行并且旨在用于头戴式耳机收听。有时,麦克风嵌入在仿真头部或头部/躯干中以便创建HRTF,在这种情况下增强了三维感。所再现的声音空间可以是令人信服的,虽然没有参考原始环境不能证明其准确性。在任何情况下,这些都是很少见于商业目录中的专业录音。旨在捕获前、后和有时上方的声音的录音通过多个麦克风来进行,存储在多个声道上,并且旨在围绕听众排列的多个扬声器上进行回放。
其他系统(诸如Smyth Realiser)提供了完全不同的体验,其中多声道录音(包括立体声)通过头戴式耳机听起来与其通过真实房间中的扬声器阵列听起来是无差别相同的。原则上,Smyth Realiser类似于其他系统,因为它将HRTF施加到多声道声音以便驱动头戴式耳机。但随着其他改进,Smyth Realiser采用在其他产品中未见到的三个关键部件:个性化,头部跟踪和每个真实收听空间和声音系统的属性的捕获。Smyth Realiser包括插入耳塞中的一对微型麦克风,其被放置在听众的耳朵中以用于测量。听众位于扬声器阵列内的收听位置处,所述扬声器通常是5.1声道或7.1声道,但是可以适应任何配置(包括高度声道)。通过扬声器播放一组简短的测试信号,然后听众戴上头戴式耳机并且进行第二组简短的测量。整个过程花费小于五分钟。在通过扬声器的测量中,Smyth Realiser不仅捕获听众的个人HRTF,还完全表征房间、扬声器和驱动扬声器的电子设备。在通过头戴式耳机的测量中,系统收集数据以便校正头戴式耳机和耳朵的交互以及头戴式耳机自身的响应。复合数据存储在存储器中,并且可以用于控制连接在音频信号路径中的均衡器。
如可见的,由于需要专用的测量麦克风、声卡和其他设备,所以进行双耳测量所需的努力是麻烦的。本文描述的方法和系统允许通过智能电话来测量BRIR,以便在不使用昂贵硬件的情况下易于双耳测量。
图1是用于由信号源101提供的双声道立体声信号、5.1声道立体声信号或7.1声道立体声信号的双耳回放的示例性音频系统100的示意图,所述信号源101可以是CD播放器、DVD播放器、车辆头部单元、MPEG环绕声(MPS)解码器等。双耳化器102根据由信号源101提供的双声道立体声信号、5.1声道立体声信号或7.1声道立体声信号生成用于耳机103的双声道信号。BRIR测量系统104允许测量实际的BRIR并且向双耳化器102提供表示BRIR的信号,以使得多声道录音(包括立体声)通过耳机103听起来与其通过真实房间中的扬声器阵列听起来是无差别相同的。图1所示的示例性音频系统100可以用于为汽车应用递送个性化多声道内容,并且可以针对所有类型的头戴式耳机(即不仅用于贴耳式头戴式耳机,还用于入耳式头戴式耳机)。
图2是使用智能电话201(或移动电话、平板手机、平板计算机、膝上型计算机等)的示例性BRIR测量系统104的示意图,其包括扬声器202和连接到两个麦克风204和205的移动音频记录器203。智能电话201的扬声器202传播由麦克风204和205捕获的声音,从而建立在扬声器202与麦克风204和205之间的声传递路径206。通过可以是蓝牙(BT)连接的双向无线连接207,在智能电话201与记录器203之间互换包括数字音频信号和/或指令的数字数据。
图3是使用智能电话301的另一个示例性BRIR测量系统104的示意图,其包括扬声器302和装备有麦克风304和305的头戴式耳机303。智能电话301的扬声器302传播由麦克风304和305捕获的声音,从而建立在扬声器302与麦克风304和305之间的声传递路径306。通过有线线路连接307或可替代地通过诸如BT连接(图3中未示出)的无线连接,将数字音频信号或模拟音频信号从麦克风304和305传递到智能电话301。相同或单独的有线线路连接或无线连接(图3中未示出)可以用于将数字音频信号或模拟音频信号从智能电话301传递到头戴式耳机303,以用于再现这些音频信号。
参考图4,移动装置(诸如图2所示的系统中的智能电话201)可以从用户接收启动命令(过程401)。在接收到启动命令时,智能电话201启动专用软件应用(app)并且与移动音频记录器203建立BT连接(过程402)。智能电话201从用户接收记录命令,并且通过BT连接207指示移动音频记录器203开始记录(过程403)。移动音频记录器203从智能电话201接收指令并且开始记录(过程404)。智能电话201通过内置扬声器202发射测试音频内容,并且移动音频记录器203记录由麦克风204和205接收的测试音频内容(过程405)。智能电话201通过BT来指示移动音频记录器203停止记录(过程406)。移动音频记录器203从智能电话201接收指令并且停止记录(过程407)。移动音频记录器203随后通过BT将记录的测试音频内容发送到智能电话201(过程408);智能电话201从移动音频记录器203接收记录的测试音频内容并且处理接收的测试音频内容(过程409)。智能电话201然后断开与移动记录器的BT连接(过程410),并且输出表示BRIR的数据(过程411)。可以在图3所示的系统中施加类似于图4所示的过程的过程,但是其中在移动装置(智能电话301)内执行音频记录。
在研究中,结合图2所示的示例性系统考虑了四个激励(测试音频内容):气球爆裂501,两种不同类型的拍手502和503、以及正弦扫描504。在消声室中距特定测量麦克风约一米处记录这些激励。在图5中给出这些测量的脉冲响应的幅值。从图中可见,两次拍手502和503在其当前形式中不是理想的,因为它们与正弦扫描504的测量明显不同。为了比较,还示出了脉冲激励505。理想地,应当在消声室中测量频率响应。然而,非专家通常不能进入消声室。一个替代方案是使用近场测量,所述近场测量通过使用用于双耳测量的相同麦克风在技术上是可行的。因此,单次拍手记录可能未必给出房间的期望特性。由此,进行测量需要来自最终用户的更多实际努力。然而,期望使测量过程对于普通用户是尽可能简单和可靠的。
诸如扬声器的声源具有近场区和远场区。在近场内,由扬声器(loudspeaker)(或简称扬声器(speaker))产生的波前是不平行的,并且波的强度随所述范围振荡。为该原因,来自近场区内的目标的回波水平可以随着小位置改变而大大地变化。一旦处于远场,波前是几乎平行的,并且强度随着范围而变化,在逆平方规则下平方。在远场内,适当地形成波束,并且可以根据标准方程预测回波水平。
从图5可见,智能电话扬声器在低频区中表现出不良响应506。在约6kHz处也可见峰值。尽管存在这些缺陷,为了以下提及的原因仍可考虑智能电话扬声器:
a)虽然智能电话扬声器具有有限的频率响应,但它们仍然可以呈现约600Hz以上的信号(另请参见图6)。
b)如果智能电话扬声器自身用于呈现测量激励,则最终用户不需要携带诸如气球的附加物体以用于测量。
c)扫描正弦激励被许多制造商和研究人员证明并广泛使用;它可以容易地在智能电话中实现。
d)用户可以将智能电话(扬声器)移动到他头部周围的任何位置。这给出了以方位角和高度的任何组合来测量BRIR的灵活性。
在图6中示出根据近场测量生成的示例性智能电话扬声器的幅值响应601,从图6可见频谱具有从约700Hz向前的均匀特性。还示出了“平坦”目标函数602、以及可用于将幅值响应601适配到目标函数602的示例性逆滤波器函数603。
以下描述用于BRIR计算的两个示例性算法。使用由于头戴式耳机真实房间(HRR)方法产生的BRIR,可以通过头戴式耳机收听用户最喜爱的内容,包括所测量的房间的信息。使用由于头戴式耳机虚拟房间(HVR)方法产生的BRIR,可以通过头戴式耳机收听用户最喜爱的内容,仅包括双耳信息。然而,用户可以任选地在信号链中包括虚拟房间。
HRR系统和方法旨在通过头戴式耳机(耳机)呈现包括听众的房间信息的双耳内容。在图7中给出在包括智能电话701的HRR系统中的BRIR测量的示例性应用的流程图,并且以下进一步更详细地描述所述示例性应用。以下还给出了构建框和过程的简要描述。
通过使用智能电话扬声器702并且将双耳麦克风(未示出)放置在用户的耳道入口处来进行BRIR的测量。以期望的方位角和高度角,通过智能电话扬声器702回放用于频谱分析的扫描正弦信号。可以使用一对特别设计的双耳麦克风,其完全阻挡听众的耳道。麦克风可以是一组单独的双耳麦克风,并且测量硬件可以与智能电话701分开,类似于图2所示的系统。可替代地,耳机换能器自身可以用作用于捕获声音的换能器。智能电话701可以使用执行例如以上结合图4描述的过程的移动应用来进行BRIR的测量、预处理和最终计算。代替逐频率频谱分析(例如,如上所述的结合对应窄带分析的扫描窄带激励),可以结合诸如快速傅里叶变换(FFT)的宽带频谱分析或滤波器组使用宽带激励或脉冲。
关于智能电话扬声器缺陷的校正,理想地需要全带宽扬声器以便覆盖所有频率范围同时测量BRIR。由于有限带扬声器(即智能电话扬声器701)用于测量,所以需要覆盖缺失的频率范围。为此,使用一个双耳麦克风来进行近场测量。由此,如图5所示,具有示例性幅值频率特性(也称为“频率特性”或“频率响应”)的逆滤波器被计算并且施加到左耳和右耳BRIR测量。在给定的实例中,目标幅值频率响应曲线被设置成平坦的,但可以是任何其他期望的曲线。诸如相位差和水平差的信息在该方法中未被补偿,但是如果需要的话可以被补偿。图8中示出此过程的流程图。所述过程包括智能电话扬声器702的幅值频率响应的近场测量(过程801)。计算智能电话扬声器702与测量麦克风之间的声学路径的对应传递函数(也称为“传递特性”)(过程802),并且将其加到逆目标幅值频率函数803(过程804)。然后计算(线性)有限脉冲响应(FIR)滤波器系数(过程805),并且处理其以便执行线性到最小相位变换(过程806)。在由过程806执行的滤波器系数的随后长度减少之后(过程807),输出长度减少的滤波器系数(过程808)。在图9中给出施加校正之后的结果的比较,其中曲线图901描绘均衡之前测量的幅值频率特性,曲线图902描绘均衡之后测量的幅值频率特性,并且曲线图903描绘用于均衡的幅值频率特性。
关于(任选的)频谱平衡器,如果用户希望在声音中嵌入某种音调,则可以施加附加的均衡。为此,获取左耳和右耳BRIR的平均值。在图10中给出所述过程的流程图。所述过程包括:提供用于左耳的身体相关传递函数BRTF L(过程1001),确定用于右耳的双耳传递函数BRTF R(过程1002),平滑处理(例如,低通滤波)(过程1003和1004),以及对平滑后的双耳传递函数BRTF L和BRTF R进行求和(过程1005)。然后,使用由过程1005提供的和以及目标幅值频率响应1007来计算对应逆滤波器的滤波器系数(过程1006)。在过程1008中输出滤波器系数。
关于头戴式耳机均衡器,由于针对耳机存在巨大的频率特性变化(有时甚至在相同制造公司内),需要施加均衡器来补偿来自耳机的影响。为此,需要特定耳机的频率响应。如图11所示,可以使用简单的设备来进行这种耳机特性测量。用于测量耳机特性的设备包括管状主体(在本文中被称为“管1101”),其一端包括用于将(入耳)耳机1103联接到管1101的适配器1102,并且其另一端装备有闭合盖1104、以及设置在管1101中接近盖1104的麦克风1105。在实践中,可以使用一个双耳麦克风来代替图11所示的麦克风1105。管1101可以具有位于两端之间某处的直径收缩部1006。管1101的体积、长度和直径应该类似于平均人类耳道的体积、长度和直径。所示的设备可以模拟压力室效应;所测量的响应因此可以接近现实。
在图12中给出对应测量过程的示意图。所述过程包括测量耳机特性(过程1201)并且根据其计算对应传递函数(过程1202)。此外,在过程1204中从过程1202所提供的传递函数减去目标传递函数1203。根据此和,(线性地)计算FIR系数(过程1205),以便随后执行线性到最小相位变换(过程1206)和长度减少(过程1207)。最后,将滤波器系数1208输出到其他应用和/或系统。
再次参见图7,所示的过程包括移动装置的扬声器的幅值频率响应的近场测量,所述扬声器在当前情况下是智能电话扬声器702(过程703)。根据由过程703产生的信号,计算智能电话扬声器702的幅值频率响应(过程704)。然后根据目标幅值频率响应706和智能电话扬声器702的所计算的幅值频率响应来计算逆滤波器幅值频率响应(过程705)。在开始并且使用智能电话扬声器702来执行BRIR测量(过程707)之后,对测量的BRIR和计算的逆滤波器幅值频率响应进行卷积(过程708)。基于对应的目标频率响应710,由房间均衡器处理由过程708产生的信号(过程709)。基于对应的目标频率响应712,由耳机均衡器处理由过程709产生的信号(过程711)。通过N个单声道音频文件714(例如,N=2个立体声信号,N=6个5.1声道信号,或N=8个7.1声道信号)对由过程711产生的信号进行卷积(过程713),并且将此卷积结果输出到耳机(过程715)。
头戴式耳机虚拟房间(HVR)系统旨在通过耳机呈现双耳内容而不包括听众的房间信息。听众可以任选地在链中包括虚拟房间。在图13中给出所述过程的示意图。以下给出了附加构建框的简要描述。此过程还需要以上结合图7-12提及的构建框。在下文中仅描述诸如去混响器和人工混响器的附加构建框。
去混响器/平滑处理:如果所测量的房间脉冲响应包含不必要的峰值和陷波,则令人不愉快的音色伪像可能降低声音质量。为了去除房间信息或移除早期和晚期反射,可以并入(时间和/或频谱)加窗技术。在本应用中,如图14所示,使用矩形窗和Blackman-Harris窗的组合。在图15中给出了在平滑处理之前(1501)和之后(1502)的示例性BRIR。
人工混响器:在上一个框中,已经移除所有房间相关信息。也就是说,在施加加窗函数(窗)之后,在BRIR中仅包含方向信息(例如,耳间时间差[ITD]和耳间水平差[ILD])。因此,源似乎非常接近耳朵。因此,如果需要合并距离信息,则可以任选地使用人工混响器。为此目的可使用任何最先进的混响器。
从图13可见,在图7所示的过程中,在BRIR测量过程707与耳机均衡过程711之间插入去混响过程1301和人工混响过程1302。此外,房间均衡过程709和对应的目标幅值频率响应710可以被频谱平衡过程1303和对应的目标幅值频率响应1304代替。可以包括通过给定窗的加窗的去混响过程1301和卷积过程708接收逆滤波器计算过程705的输出,其中卷积过程708现在可以在耳机均衡过程711与卷积过程713之间发生。
在此整个研究中,重点是不破坏BRIR的相位信息。给出了示例性BRIR的图16中的幅值频率响应以及图17中的相位频率响应。幅值频率响应示出在施加去混响器算法之后移除BRIR的锐峰和陷波。相位响应示出甚至在去混响之后,相位信息也在很大程度上被保留。非正式收听指示卷积语音的局部化也未被破坏。在图16中,曲线图1601描绘耳机均衡之后的幅值频率响应,曲线图1602描绘房间均衡之后的幅值频率响应,曲线图1603描绘去混响之后的幅值频率响应,并且曲线图1604描绘智能电话缺陷校正之后的幅值频率响应。在图17中,曲线图1701描绘耳机均衡之后的相位频率响应,曲线图1702描绘房间均衡之后的相位频率响应,曲线图1703描绘去混响之后的相位频率响应,并且曲线图1704描绘智能电话缺陷校正之后的相位频率响应。
图18示出作为麦克风的示例性耳机换能器的幅值频率响应。由于本文描述的系统可以针对消费者用户,所以耳机换能器和外壳可以特别地用作麦克风。在先导试验中,使用可商购获得的入耳式耳机作为麦克风进行测量。在消声室中通过扬声器回放从2Hz到20kHz的扫描正弦信号。耳机胶囊离扬声器约一米远。为了比较,还使用参考测量系统来进行参考测量。在图18中给出了测量的幅值频率响应,其中曲线图1801描绘了左声道(1801)、右声道(1802)和参考测量(1803)的幅值频率响应。从曲线中可见,对应于耳机的曲线的形状与从约1,000Hz到9,000Hz的参考测量的形状是相当的。
虽然已描述了本发明的各种实施方案,但是对于本领域的那些普通技术人员将明显的是,在本发明的范围内,更多的实施方案和实现方式是可能的。因此,除了根据随附权利要求书及其等效物,本发明不受限制。
Claims (14)
1.一种方法,其包括:
将具有内置扬声器的移动装置定位在收听环境中的第一位置处,并且将至少一个麦克风定位在所述收听环境中的至少一个第二位置处;
从所述收听环境中的所述第一位置处的所述移动装置的所述扬声器发射测试音频内容;
使用所述收听环境中的所述至少一个第二位置处的所述至少一个麦克风来接收由所述扬声器发射的所述测试音频内容;以及
至少部分地基于所述接收的测试音频内容,确定在由至少一个耳机回放之前将施加到期望音频内容的一个或多个调整;其中
所述第一位置和所述第二位置彼此远离,以使得所述至少一个麦克风位于所述扬声器的近场内。
2.如权利要求1所述的方法,其中确定将施加到所述期望音频内容的一个或多个调整包括:对所述接收的所述测试音频内容回放执行频谱分析以便提供所述接收的所述测试音频内容回放的频率响应。
3.如权利要求2所述的方法,其还包括:
将所述接收的所述测试音频内容回放的频率响应与目标频率响应进行比较;以及
至少部分地基于所述接收的所述测试音频内容回放的所述频率响应与目标频率响应的比较,确定将施加到所述期望音频内容的一个或多个调整。
4.如前述权利要求中任一项所述的方法,其中所述至少一个麦克风设置在所述至少一个耳机中或所述至少一个耳机上,或由至少一个入耳式耳机提供。
5.如前述权利要求中任一项所述的方法,其中所述至少一个耳机是插入听众的耳朵中的入耳式耳机。
6.如前述权利要求中任一项所述的方法,其中
当所述至少一个耳机用作麦克风时,所述至少一个耳机具有接收器频率特性;以及
当接收所述测试音频内容时,基于目标接收器频率特性来均衡所述至少一个耳机的所述频率特性。
7.如前述权利要求中任一项所述的方法,其中
当所述至少一个耳机用作扬声器时,所述至少一个耳机具有发射器频率特性;以及
当播放所述期望音频内容时,基于目标发射器频率特性来均衡所述至少一个耳机的所述发射器频率特性。
8.如前述权利要求中任一项所述的方法,其还包括第一麦克风和第二麦克风,所述第一麦克风定位在所述收听环境内邻近听众的一个耳朵的第一位置处,并且第二麦克风定位在所述收听环境内邻近所述听众的另一个耳朵的第一位置处。
9.如前述权利要求中任一项所述的方法,其中所述移动装置的所述扬声器具有基于扬声器目标函数来均衡的频率特性。
10.如前述权利要求中任一项所述的方法,其中通过使用或模拟所述压力室效应来测量所述至少一个麦克风的所述频率特性。
11.如前述权利要求中任一项所述的方法,其还包括在所述期望音频内容被所述至少一个耳机播放之前,对所述期望音频内容施加所述调整。
12.一种系统,其包括:
移动装置,其具有内置扬声器、设置在收听环境中的第一位置处;以及
至少一个麦克风,其设置在所述收听环境中的至少一个第二位置处,其中所述移动装置被配置来
通过所述收听环境中的所述第一位置处的所述扬声器发射测试音频内容;
从所述耳机接收由所述收听环境中的所述至少一个第二位置处的所述扬声器发射的所述测试音频内容;以及
至少部分地基于所述接收的音频内容,确定在由所述耳机回放之前将由所述移动装置施加到所述期望音频内容的一个或多个调整;其中
所述第一位置和所述第二位置彼此远离,以使得所述至少一个麦克风位于所述扬声器的近场内。
13.如权利要求12所述的系统,其中所述移动装置包括移动电话、智能电话、平板手机或平板计算机。
14.如权利要求12或13所述的系统,其还包括连接在所述至少一个麦克风与所述移动装置之间的音频记录器,所述音频记录器被所述移动装置控制,并且被配置来记录由所述麦克风接收的所述测试音频内容,以及在请求时将所述记录的测试音频内容传输到所述移动装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP14186097.3A EP3001701B1 (en) | 2014-09-24 | 2014-09-24 | Audio reproduction systems and methods |
EP14186097.3 | 2014-09-24 | ||
PCT/EP2015/071639 WO2016046152A1 (en) | 2014-09-24 | 2015-09-22 | Audio reproduction systems and methods |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106664497A true CN106664497A (zh) | 2017-05-10 |
CN106664497B CN106664497B (zh) | 2021-08-03 |
Family
ID=51619003
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580043758.6A Active CN106664497B (zh) | 2014-09-24 | 2015-09-22 | 音频再现系统和方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10805754B2 (zh) |
EP (1) | EP3001701B1 (zh) |
JP (1) | JP6824155B2 (zh) |
CN (1) | CN106664497B (zh) |
WO (1) | WO2016046152A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108347686A (zh) * | 2018-02-07 | 2018-07-31 | 广州视源电子科技股份有限公司 | 音频测试方法、装置、智能设备及存储介质 |
CN109769165A (zh) * | 2017-11-09 | 2019-05-17 | 哈曼国际工业有限公司 | 外耳式耳机装置和方法 |
WO2020083088A1 (zh) * | 2018-10-26 | 2020-04-30 | 华为技术有限公司 | 一种音频渲染方法及装置 |
CN113678474A (zh) * | 2019-04-08 | 2021-11-19 | 哈曼国际工业有限公司 | 个性化三维音频 |
Families Citing this family (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3001701B1 (en) | 2014-09-24 | 2018-11-14 | Harman Becker Automotive Systems GmbH | Audio reproduction systems and methods |
JP6561718B2 (ja) * | 2015-09-17 | 2019-08-21 | 株式会社Jvcケンウッド | 頭外定位処理装置、及び頭外定位処理方法 |
EP3446499B1 (en) * | 2016-04-20 | 2023-09-27 | Genelec OY | Method for regularizing the inversion of a headphone transfer function |
US10262672B2 (en) * | 2017-07-25 | 2019-04-16 | Verizon Patent And Licensing Inc. | Audio processing for speech |
FR3073659A1 (fr) * | 2017-11-13 | 2019-05-17 | Orange | Modelisation d'ensemble de fonctions de transferts acoustiques propre a un individu, carte son tridimensionnel et systeme de reproduction sonore tridimensionnelle |
US10872602B2 (en) | 2018-05-24 | 2020-12-22 | Dolby Laboratories Licensing Corporation | Training of acoustic models for far-field vocalization processing systems |
EP3837864A1 (en) | 2018-08-17 | 2021-06-23 | DTS, Inc. | Adaptive loudspeaker equalization |
US11221820B2 (en) * | 2019-03-20 | 2022-01-11 | Creative Technology Ltd | System and method for processing audio between multiple audio spaces |
US11115765B2 (en) | 2019-04-16 | 2021-09-07 | Biamp Systems, LLC | Centrally controlling communication at a venue |
KR20210061696A (ko) * | 2019-11-20 | 2021-05-28 | 엘지전자 주식회사 | 음향 입출력 장치의 검사 방법 |
EP3873105B1 (en) | 2020-02-27 | 2023-08-09 | Harman International Industries, Incorporated | System and methods for audio signal evaluation and adjustment |
CN112367602A (zh) * | 2020-11-06 | 2021-02-12 | 歌尔科技有限公司 | 蓝牙耳机测试方法、系统、测试端及计算机可读存储介质 |
CN113709648A (zh) * | 2021-08-27 | 2021-11-26 | 重庆紫光华山智安科技有限公司 | 一种麦克风扬声器协同测试方法、系统、介质及电子终端 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1778143A (zh) * | 2003-09-08 | 2006-05-24 | 松下电器产业株式会社 | 声像控制装置的设计工具及声像控制装置 |
US20070270988A1 (en) * | 2006-05-20 | 2007-11-22 | Personics Holdings Inc. | Method of Modifying Audio Content |
US20100272270A1 (en) * | 2005-09-02 | 2010-10-28 | Harman International Industries, Incorporated | Self-calibrating loudspeaker system |
WO2013126603A1 (en) * | 2012-02-21 | 2013-08-29 | Intertrust Technologies Corporation | Audio reproduction systems and methods |
WO2014036085A1 (en) * | 2012-08-31 | 2014-03-06 | Dolby Laboratories Licensing Corporation | Reflected sound rendering for object-based audio |
WO2014036121A1 (en) * | 2012-08-31 | 2014-03-06 | Dolby Laboratories Licensing Corporation | System for rendering and playback of object based audio in various listening environments |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2571091B2 (ja) * | 1988-03-18 | 1997-01-16 | ティーオーエー株式会社 | スピーカの周波数特性補正装置 |
JPH05199596A (ja) * | 1992-01-20 | 1993-08-06 | Nippon Telegr & Teleph Corp <Ntt> | 音場再生装置 |
JPH09327086A (ja) * | 1996-06-07 | 1997-12-16 | Seiji Hama | スピーカーの音場補正方法及びスピーカーシステム並びに音響システム |
JP2001134272A (ja) | 1999-11-08 | 2001-05-18 | Takahiro Yamashita | 音環境体感設備 |
US7483540B2 (en) * | 2002-03-25 | 2009-01-27 | Bose Corporation | Automatic audio system equalizing |
JP2004128854A (ja) | 2002-10-02 | 2004-04-22 | Matsushita Electric Ind Co Ltd | 音響再生装置 |
US20060050908A1 (en) * | 2002-12-06 | 2006-03-09 | Koninklijke Philips Electronics N.V. | Personalized surround sound headphone system |
GB0419346D0 (en) * | 2004-09-01 | 2004-09-29 | Smyth Stephen M F | Method and apparatus for improved headphone virtualisation |
US8194874B2 (en) * | 2007-05-22 | 2012-06-05 | Polk Audio, Inc. | In-room acoustic magnitude response smoothing via summation of correction signals |
JP2011120028A (ja) | 2009-12-03 | 2011-06-16 | Canon Inc | 音声再生装置、及びその制御方法 |
JP5112545B1 (ja) | 2011-07-29 | 2013-01-09 | 株式会社東芝 | 情報処理装置および同装置の音響信号処理方法 |
JP2013247456A (ja) * | 2012-05-24 | 2013-12-09 | Toshiba Corp | 音響処理装置、音響処理方法、音響処理プログラムおよび音響処理システム |
EP2869601A4 (en) | 2012-06-29 | 2015-12-23 | Sony Corp | AUDIO / VIDEO DEVICE |
US9319019B2 (en) * | 2013-02-11 | 2016-04-19 | Symphonic Audio Technologies Corp. | Method for augmenting a listening experience |
FR3009158A1 (fr) * | 2013-07-24 | 2015-01-30 | Orange | Spatialisation sonore avec effet de salle |
US9565497B2 (en) * | 2013-08-01 | 2017-02-07 | Caavo Inc. | Enhancing audio using a mobile device |
EP3108671B1 (en) * | 2014-03-21 | 2018-08-22 | Huawei Technologies Co., Ltd. | Apparatus and method for estimating an overall mixing time based on at least a first pair of room impulse responses, as well as corresponding computer program |
EP3001701B1 (en) | 2014-09-24 | 2018-11-14 | Harman Becker Automotive Systems GmbH | Audio reproduction systems and methods |
-
2014
- 2014-09-24 EP EP14186097.3A patent/EP3001701B1/en active Active
-
2015
- 2015-09-22 CN CN201580043758.6A patent/CN106664497B/zh active Active
- 2015-09-22 US US15/513,620 patent/US10805754B2/en active Active
- 2015-09-22 JP JP2017507406A patent/JP6824155B2/ja active Active
- 2015-09-22 WO PCT/EP2015/071639 patent/WO2016046152A1/en active Application Filing
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1778143A (zh) * | 2003-09-08 | 2006-05-24 | 松下电器产业株式会社 | 声像控制装置的设计工具及声像控制装置 |
US20100272270A1 (en) * | 2005-09-02 | 2010-10-28 | Harman International Industries, Incorporated | Self-calibrating loudspeaker system |
US20070270988A1 (en) * | 2006-05-20 | 2007-11-22 | Personics Holdings Inc. | Method of Modifying Audio Content |
WO2013126603A1 (en) * | 2012-02-21 | 2013-08-29 | Intertrust Technologies Corporation | Audio reproduction systems and methods |
WO2014036085A1 (en) * | 2012-08-31 | 2014-03-06 | Dolby Laboratories Licensing Corporation | Reflected sound rendering for object-based audio |
WO2014036121A1 (en) * | 2012-08-31 | 2014-03-06 | Dolby Laboratories Licensing Corporation | System for rendering and playback of object based audio in various listening environments |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109769165A (zh) * | 2017-11-09 | 2019-05-17 | 哈曼国际工业有限公司 | 外耳式耳机装置和方法 |
CN109769165B (zh) * | 2017-11-09 | 2022-01-14 | 哈曼国际工业有限公司 | 外耳式耳机装置和方法 |
CN108347686A (zh) * | 2018-02-07 | 2018-07-31 | 广州视源电子科技股份有限公司 | 音频测试方法、装置、智能设备及存储介质 |
WO2020083088A1 (zh) * | 2018-10-26 | 2020-04-30 | 华为技术有限公司 | 一种音频渲染方法及装置 |
US11445324B2 (en) | 2018-10-26 | 2022-09-13 | Huawei Technologies Co., Ltd. | Audio rendering method and apparatus |
CN113678474A (zh) * | 2019-04-08 | 2021-11-19 | 哈曼国际工业有限公司 | 个性化三维音频 |
Also Published As
Publication number | Publication date |
---|---|
CN106664497B (zh) | 2021-08-03 |
US10805754B2 (en) | 2020-10-13 |
EP3001701B1 (en) | 2018-11-14 |
JP2017532816A (ja) | 2017-11-02 |
WO2016046152A1 (en) | 2016-03-31 |
EP3001701A1 (en) | 2016-03-30 |
JP6824155B2 (ja) | 2021-02-03 |
US20170295445A1 (en) | 2017-10-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106664497A (zh) | 音频再现系统和方法 | |
US10070245B2 (en) | Method and apparatus for personalized audio virtualization | |
KR102008771B1 (ko) | 청각-공간-최적화 전달 함수들의 결정 및 사용 | |
EP3111670B1 (en) | Method of and apparatus for determining an equalization filter | |
US7489788B2 (en) | Recording a three dimensional auditory scene and reproducing it for the individual listener | |
US7123731B2 (en) | System and method for optimization of three-dimensional audio | |
US8855341B2 (en) | Systems, methods, apparatus, and computer-readable media for head tracking based on recorded sound signals | |
US7602921B2 (en) | Sound image localizer | |
JP5533248B2 (ja) | 音声信号処理装置および音声信号処理方法 | |
JP3435141B2 (ja) | 音像定位装置、並びに音像定位装置を用いた会議装置、携帯電話機、音声再生装置、音声記録装置、情報端末装置、ゲーム機、通信および放送システム | |
AU2001239516A1 (en) | System and method for optimization of three-dimensional audio | |
IL141822A (en) | A method and system for imitating a 3D audio environment | |
JP2009512364A (ja) | 仮想オーディオシミュレーション | |
US20050047619A1 (en) | Apparatus, method, and program for creating all-around acoustic field | |
Pinardi et al. | Direction specific analysis of psychoacoustics parameters inside car cockpit: A novel tool for NVH and sound quality | |
US6925426B1 (en) | Process for high fidelity sound recording and reproduction of musical sound | |
CN109923877A (zh) | 对立体声音频信号进行加权的装置和方法 | |
JP2008282042A (ja) | 再生装置 | |
Fonseca et al. | Measurement of car cabin binaural impulse responses and auralization via convolution | |
JP6805879B2 (ja) | フィルタ生成装置、フィルタ生成方法、及びプログラム | |
CN117311660A (zh) | 音频信号校准方法、头戴显示设备和计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |