CN102265647B - 通过发送效果处理生成输出信号 - Google Patents

通过发送效果处理生成输出信号 Download PDF

Info

Publication number
CN102265647B
CN102265647B CN200980151965.8A CN200980151965A CN102265647B CN 102265647 B CN102265647 B CN 102265647B CN 200980151965 A CN200980151965 A CN 200980151965A CN 102265647 B CN102265647 B CN 102265647B
Authority
CN
China
Prior art keywords
signal
input signal
weighting
gain
parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN200980151965.8A
Other languages
English (en)
Other versions
CN102265647A (zh
Inventor
J.G.H.科彭斯
E.G.P.舒伊杰斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN102265647A publication Critical patent/CN102265647A/zh
Application granted granted Critical
Publication of CN102265647B publication Critical patent/CN102265647B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • H04S3/002Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2400/00Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2420/00Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/01Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S2420/00Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/03Application of parametric coding in stereophonic audio systems

Abstract

通过将一种发送效果处理应用到输入信号而从该输入信号生成输出信号。该输入信号包括各分量信号的加权和。所各加权的分量信号之间的相依性由参数表示。根据本发明,所述输出信号依赖于这些参数而生成以补偿输入信号中所包含的分量信号的不相等的加权。由于该补偿的原因,对应于各单独的分量信号的发送效果的强度(几乎)与每个分量信号的强度成比例,这导致更逼真的环绕体验。

Description

通过发送效果处理生成输出信号
技术领域
本发明涉及一种用于通过将发送效果处理应用到输入信号而从该输入信号生成输出信号的方法和设备,其中该输入信号包括多个分量信号的加权和,其中各加权的分量信号之间的相依性用参数表示。本发明还涉及一种用于生成改进的双耳输出信号的双耳解码器,并且涉及一种计算机程序产品。
背景技术
MPEG环绕是在最近由MPEG标准化的音频编码中的主要进展之一,参见ISO/IEC23003-1 MPEG环绕。MPEG环绕是多声道音频编码工具,其允许现有的基于单声道和基于立体声的编码器扩展到多声道。该MPEG环绕编码器典型地从多个声道输入信号创建单声道或立体声下混合(downmix),并且从多声道输入信号导出空间参数。该下混合和空间参数在单独流中被编码。然而,该空间参数流可以嵌入在下混合流中。MPEG环绕解码器解码空间参数,该空间参数用于上混合被解码的下混合以便获得多声道输出信号。因为多声道输入信号的空间图像被参数化,所以MPEG环绕允许将编码的立体声下混合解码到其他再现(rendering)设备上,比如包括头戴式耳机上的重现(reproduction)的这些再现设备。操作的该特定模式被称为MPEG环绕双耳解码处理,其中将空间参数与头相关传递函数(HRTF)数据组合(J. Breebaart, Analysis and Synthesis of Binaural Parameters for Efficient 3D Audio Rendering in MPEG Surround, ICME 07)以产生所谓的双耳输出。在该模式中,可以使用常规的头戴式耳机提供逼真的环绕体验。传统上,HRTF数据典型地被描述为从每个扬声器到双耳的脉冲响应对的集合。
当MPEG环绕双耳解码器在低功率(LP)模式下被操作时,它可以在移动设备中实现。在该模式下,在离线处理中,原始HRTF数据已被转换为允许使用低计算复杂性处理的参数域。然而,LP模式的缺点在于,参数化的HRTF数据典型地仅表示原始HRTF数据的消声部分,即它仅覆盖完整时域响应的主要与定向线索(directional cue)关联的部分。在实践中,这意味着双耳解码器输出信号将包含定向信息,但是听起来将不是非常自然,因为几乎没有任何外化(externalization),所述外化主要与HRTF数据的回声部分相关联。为了补偿这种外化的缺失,MPEG环绕标准允许使用回响(reverberation),如ISO/IEC 23003-1 MPEG Surround Annex D中所规定。在这种情况下,MPEG环绕双耳解码器利用并行回响扩展。输入立体声下混合被馈送到回响过程。该过程的输出被直接添加到MPEG环绕双耳输出。利用这种典型地为全向(即不依赖于方向)的并行回响信号,回声部分被创建并因此创建更逼真的环绕体验。
然而,被添加到双耳输出信号的具有回响的主观测试(其是所谓的发送效果类型)没有表现出令人满意的性能。这种双耳输出中的显著人为现象(artifact)之一是:当最初的多声道编码器内容主要存在于中央声道时,双耳输出信号听起来过于回响。
相似的缺点适用于其他发送效果,比如合唱、声音倍增器(vocal doubler)、杂乱噪声、空间扩展器等等。
发明内容
本发明的目的是提供一种通过将发送效果处理应用到输入信号而从该输入信号生成输出信号的改进方法,该方法导致改进的输出信号,其针对一些发送效果提供改进的环绕体验。本发明由独立权利要求限定。从属权利要求限定有利实施例。
该目的根据本发明以一种生成如前所述的输出信号的方法来实现,所述方法特征在于输出信号依赖于所述参数而生成以补偿输入信号中所包含的分量信号的不相等加权。
所述发送效果整体地应用于输入信号,而不应用于各个分量信号。因此,特别有利的是,补偿输入信号中分量信号的不相等加权同时应用发送效果。由于该补偿的原因,对应于单独的分量信号的发送效果的强度(几乎)与每个分量信号的强度成比例,并且因此导致更逼真的环绕体验。本发明针对作为发送效果的实例的回响效果而被阐释。
回响典型地用于模拟声反射并且因此可以与(消声的)HRTF数据联合使用以将虚拟声源放置在听者的头之外,即以便创建距离的感觉。输入信号是在下混合之前被加权的分量信号(例如多个声道表示的6个声道)的下混合。
典型地,多声道信号中所包含的对应于环绕声道的分量信号在下混合之前衰减。当使用MPEG环绕编码时,对应于中央声道的分量信号在立体声下混合中被有效放大(当合计左和右下混合声道时每声道sqrt(0.5)总计到sqrt(2))。输入信号中所包含的分量信号的这种不相等加权导致回响效果,该回响效果对于对应于中央声道的分量而言更强,且对于对应于环绕声道的分量而言更弱,这是因为并行回响直接在不相等的加权的下混合上使用回响。然而,这种不相等的加权通过使用HRTF参数不与5.1声道的定向再现匹配,这(至少在概念上)将所恢复的分量信号映射到双耳信号。因此,当这些信号(即基于恢复的分量信号的定向的再现信号和通过将回响应用到输入信号而获得的输出信号)被混合时,外化可能是不自然的,因为回响效果强度依赖于最初的多声道内容的占优势的方向。所述不相等的加权的不利效果通过修改因将回响效果或任何其他发送效果应用到输入信号而得到的输出信号的生成来减少,从而使得适合于补偿输入信号中所包含的分量信号的不相等加权。该调适利用包括各加权的分量信号之间的相依性的参数。对输入信号做出贡献的各单独加权的分量或加权的分量的组合不再是可用的,因为这些分量信号在加权之后已被求和(下混合)。然而,所述参数允许基于由这些参数表示的各加权的分量信号之间的相依性估计它们的贡献。存在可对输出信号的生成进行调适的各种方式,这将在下述实施例中讨论。
在一个实施例中,输入信号被分解为多个中间信号,其中每个中间信号利用相应增益缩放(scale)以补偿输入信号中所包含的分量信号的不相等的加权。当来自多个分量信号的信息可被组合成中间信号时,生成中间信号(或至少在概念上使用中间信号)是有益的。例如,当MPEG环绕标准被用在立体声兼容方式时,输入信号的左声道信号和右声道信号二者均包含来自中央声道的信息。在这种情况下,对应于中央声道的中间信号可以使用输入信号的左信号和右信号二者来构造。而且,当多声道信号包括五个声道信号(即中央声道信号、左前声道信号、左环绕声道信号、右前声道信号和右环绕声道信号)时,左前声道信号和左环绕声道信号可被组合在中间信号中,以及右前声道信号和右环绕声道信号也可被组合在中间信号中。
在另一个实施例中,对应于相应中间信号的相应增益被计算为预定的另外的增益的加权和,其中所述预定的另外的增益从用于创建输入信号的权重导出,其中所述预定的另外的增益利用从加权的分量信号对相应中间信号的相对贡献导出的相应权重来加权。可以近似来自中间信号的分量信号。MPEG环绕例如规定OTT(一到二)处理块被用于使用声道间强度差(IID)参数从单个信号创建两个信号,或者TTT(二到三)处理块被用于使用声道预测参数和/或IID参数从两个信号创建三个信号。所述增益可以应用在使用OTT和/或TTT处理块创建的信号上,并且所得到的信号可以再次被下混合(毕竟,单个信号是发送效果所需要的)。然而,上混合步骤(即从输入信号创建多个中间信号)可以被省略,因为与中间信号相关的能量分布是已知的。因此,当前实施例提供将增益应用到中间信号的高效方式,而不实际恢复对这些中间信号做出贡献的各个分量信号。
在另一个实施例中,加权的分量信号的对相应中间信号的相对贡献从对中间信号做出贡献的各加权分量信号之间的强度差导出,其中该强度差从所述参数导出。在各加权的分量信号之中的能量分布包括在声道间强度差中,该声道间强度差又包括在附随输入信号的参数中。
在另一个实施例中,输入信号利用被计算为另外的增益的加权和的增益来缩放,其中所述另外的增益从对应于加权的分量信号的参数导出,其中所述另外的增益利用从加权的分量信号或加权的分量信号的组合对输入信号的相对贡献导出的权重来加权。这提供了将增益应用于输入信号的高效方式,而实际不需要恢复加权的分量信号或加权的分量信号的组合。对于单声道输入信号,这意味着单个增益被应用到输入信号。对于立体声输入信号,这意味着两个单独的增益被应用,每个增益用于这两个声道中的一个,其包含在输入信号中。
在另一个实施例中,加权的分量信号或加权的分量信号的组合的相对贡献从对输入信号做出贡献的各加权的分量信号之间的强度差导出,其中该强度差从所述参数导出。在概念上,如在先前的实施例之一中那样,可以使用例如若干个级联和并行的OTT处理块从输入信号恢复加权的分量信号。OTT处理块是能量保护的,从而基于参数中所包含的强度差计算输入信号中的加权分量信号的能量分布。该分布相对于输入信号的能量,从而OTT处理块在两个输出声道上分布其输入信号的能量。因此,将增益应用到各分量信号可以通过将单个增益应用到输入信号来实现。
在另一个实施例中,生成输出信号包括基于参数调适应用到输入信号的发送效果处理。可以调节所述效果本身以补偿分量的加权,但是这在效率方面通常是次优解决方案。
在另一个实施例中,生成输出信号包括调适输出信号本身,其中该输出信号利用依赖于参数而调节的增益来缩放。当调适发送效果处理(其例如受到输入信号的大时间间隔的影响(如对于回响滤波器而言,通常是这样的情况))的输出信号时,对应于特定时间间隔的参数可以以信号相关方式被混合,这是由于时间拖尾效应(smearing)造成的。在这种情况下,有利的是,随时间依赖于参数调适增益,以及效果和信号属性。
在另一个实施例中,根据MPEG环绕标准,输入信号和参数分别是下混合信号和空间参数。对于MPEG环绕,分量信号由多声道源(例如来自DVD的5.1音频,用多声道麦克风的多声道记录)的各声道形成,空间参数以时间和频率相关方式描述各声道或声道的组合(中间的下混合)之间的关系。
根据本发明的另一个方面,提供一种用于通过将发送效果处理应用到输入信号从输入信号生成输出信号的发送效果设备。应当理解,上述特征、优点、评论等同样适用于本发明的该方面。
本发明的这些和其他方面、特征和优点将根据下文所述的实施例而清楚明白并且参照这些实施例而被阐明。
附图说明
图1示出具有并行的发送效果处理块的双耳再现器的实例架构;
图2示出根据本发明的发送效果设备的实施例;
图3示出包括调适输入信号的发送效果设备的实施例;
图4示出发送效果设备的实例架构,其中输入信号被分解为多个中间信号,每个中间信号利用相应增益来缩放;
图5示出MPEG环绕编码器的架构的实例;
图6示出515配置中MPEG环绕下混合的架构的实例;
图7示出包括调适应用于输入信号的发送效果处理的发送效果设备的实施例;
图8示出包括依赖于参数调适输出信号本身的发送效果设备的实施例;
图9示出包括与发送效果设备并联的双耳再现器的双耳解码器的实施例。
具体实施方式
图1示出具有并联的发送效果处理设备100-A的双耳再现器200的架构的实例。包括分量信号的加权和的输入信号101连同包括各加权分量信号之间的相依性的参数102被馈送到双耳再现器200。双耳再现器200执行对输入信号101和参数102的处理以提供适用于由头戴式耳机重现的双耳输出201。双耳再现器的实例之一是MPEG环绕双耳解码(ISO/IEC23003-1,MPEG环绕)。输入信号101被并行地馈送到双耳再现器200和发送效果设备100-A,其将发送效果处理应用到输入信号101,从而导致输出信号121。输出信号121通过加法电路300而被添加到双耳再现器的输出。加法电路的输出301被提供给头戴式耳机(未示出)。存在各种发送效果,比如回响、合唱、声音倍增器、杂乱噪声、空间扩展器等等。回响是最流行的发送效果之一,其可以用于将虚拟声音源放置在听者的头之外,即以便创建距离的感觉。在例如William G. Gardner, "Applications of Digital Signal Processing to Audio and Acoustics"中"Reverberation Algorithms". Mark Kahrs and Karlheinz Brandenburg (编者), Kluwer, 1998年3月, or Shreyas A. Paranjpe, Time-variant Orthogonal Matrix Feedback Delay Network Reverberator, Audio Engineering Society 110th Convention Paper 5381, 阿姆斯特丹, 荷兰, 2001年5月12-15日 中描述了从输入信号创建回响信号。所述回响效果整体地应用于输入信号。
本发明提出一种通过将发送效果处理应用到输入信号101而生产输出信号121的方法,这依赖于参数102补偿了输入信号101中分量信号的不相等加权。对输入信号101做出贡献的分量信号通常被不相等地加权。发送效果设备100以以下方式生成输出信号121:依赖于参数102补偿不相等的加权。参数102包括各加权分量信号之间的相依性。特别地,参数102包括关于各个加权分量信号对输入信号101的相对贡献的信息。参数102允许相对于输入信号估计加权分量信号。由于用于加权分量信号的权重是已知的,由于它们通过MPEG环绕位流和解码器来规定,所以可以估计分量信号本身。这导致高效的处理,以便补偿输入信号101中的分量信号的不相等加权。
图2示出根据本发明的发送效果设备的实施例。效果处理设备100不同于图1的效果处理设备100-A,不同之处在于它具有作为附加输入的参数102。而且,图2的效果处理设备100实施生成输出信号121的步骤,该输出信号121适应于依赖于参数102补偿输入信号中所包含的分量信号的不相等加权。
根据一个实施例,生成输出信号121包括调适输入信号101。在此情况下,调适输入信号的步骤先于应用发送效果处理的步骤。
图3示出包括调适输入信号101的发送效果设备的实施例。该发送效果设备包括两个电路,即执行调适输入信号的步骤的调适电路120和执行应用发送效果处理的步骤的发送效果处理电路110。输入信号101和参数102被馈送到电路120,其输出103被馈送到电路110。电路110的输出充当输出信号121。输入信号101可以是单声道信号或立体声信号。
图4示出发送效果设备100的架构的实例,其中输入信号101被分解为多个中间信号401、402和403,每个中间信号利用相应增益来缩放。输入信号101是立体声信号并且它包括输入信号101的左声道101a和输入信号101的右声道101b。输入信号被馈送到电路410,其执行输入信号到三个中间信号的上混合,这三个中间信号对应于左声道、右声道和中央声道。这三个信号分别被称为左中间信号、右中间信号和中央中间信号。电路410可以是从MPEG环绕得知的二到三(TTT)模块。对于ldmx为输入信号的左声道,rdmx为输入信号的右声道,且Tumx为表示解码器TTT模块乘以技术的下混合倒置和/或矩阵兼容性倒置和/或3D倒置矩阵(MPEG环绕规范的相应子目录6.5.2.3,6.5.2.4和6.11.5)的矩阵:
,其中cij从MPEG环绕参数以及可能地从HRTF数据计算,电路410的输出是以下矩阵相乘的结果:
由于Tumx矩阵依赖于MPEG环绕参数,参数102也被馈送到电路410。所得到的中间信号被馈送到增益补偿电路420,其中每个中间信号利用相应增益来缩放以补偿输入信号中所包含的分量信号的不相等加权。电路420实现了包括三个中间信号的向量与以下增益补偿矩阵的矩阵乘法:
其中Gl是对应于左中间信号的增益,Gr是对应于右中间信号的增益,且Gc是对应于中央中间信号的增益。增益Gl和Gr被用于补偿由于环绕增益gs­所引起的任何功率损失。增益Gc被用于补偿由于中央增益gc所引起的功率增加。该增益独立于MPEG环绕参数并且等于Gc=1/(2·gc)。环绕增益和中央增益的意义将在讨论图5时更详细地解释,现在知道gs是已被用于缩放与输入信号有关的环绕声道信号的实际权重且gc是已被用于缩放与输入信号有关的中央声道信号的实际权重就足够了。
在一个实施例中,对应于相应的中间信号(左中间信号、右中间信号或中央中间信号)的相应增益Gl、Gr或Gc被计算为预定的另外的增益的加权和,其中预定的另外的增益从用于创建输入信号101的权重中导出。这些预定的另外的增益用从加权的分量信号对相应中间信号的相对贡献导出的相应权重加权。
相应增益Gl和Gr优选地根据以下通用表达式计算:
其中gf是已被用于缩放与输入信号相关的前声道信号的实际权重(典型地gf=1,更多的细节参见图5的描述),gs是已被用于缩放对输入信号做出贡献的环绕声道信号的实际权重,f(IIDl)是对应于左前声道的加权分量信号对左中间信号的相对贡献,(1-f(IIDl))是对应于左环绕声道的加权分量信号对左中间信号的相对贡献。下标l代表“左”且下标r代表“右”以区分左声道与右声道,且a是表示权重彼此补充所用的方式的参数(a=0.5针对功率互补权重,且a=1针对幅度互补权重)。
加权分量信号对相应中间信号的相对贡献从对中间信号做出贡献的各加权分量信号之间的强度差IID­l或IIDr(其中下标l和r分别代表“左声道”和“右声道”)导出,其中该强度差从参数102导出。这些相对贡献通过使用函数f和(1-f)来指示。IIDl是加权左前声道与加权左环绕声道之间的对数的信道间强度差(IID),且IIDr是加权右前声道与加权右环绕声道之间的对数的信道间强度差(IID)。f(IID)的实例是:
其他函数也是可能的,它们应当将对数的IID值映射到具有0与1之间的值的权重。
经缩放的中间信号421、422和423被馈送到电路430,其是从MPEG环绕得知的三到二(倒转的-TTT)编码器模块。电路430将这三个经缩放的中间信号下混合为信号103,其随后被馈送到发送效果处理电路110。对于Tdmx为表示倒转的-TTT模块的矩阵,所述下混合被实现为如下的矩阵乘法:
尽管上述下混合导致立体声信号103,但是该下混合也可以提供单声道信号。
对于图4中描绘的实例,信号103a和103b可以被表达为下述矩阵乘法的结果:
尽管电路410、420和430在图4中被描绘为单独的电路,但是实际的硬件或软件实现方式不要求这种严格的电路划分。出于效率的原因,在这些电路中执行的处理可以被组合。而且,所述矩阵乘法可以在处理器上执行,而不使中间信号明确地可见。
电路110描绘了发送效果处理电路,其包括电路530、520和510。在电路530中,完成因调适输入信号101而得到的立体声信号103的下混合,从而导致单声道下混合501。该下混合501被并行地馈送到电路520和510,其从下混合信号501创建回响输出信号121。对于回响发送效果,电路510和520中所使用的处理可以是如 William G. Gardner, "Applications of Digital Signal Processing to Audio and Acoustics"中"Reverberation Algorithms". Mark Kahrs and Karlheinz Brandenburg (编者), Kluwer, 1998年3月, 或者Shreyas A. Paranjpe, Time-variant Orthogonal Matrix Feedback Delay Network Reverberator, Audio Engineering Society 110th Convention Paper 5381, 阿姆斯特丹, 荷兰, 2001年5月12-15日中所描述。其他发送效果处理在 DAFX: Digital Audio Effects, Udo Zölzer, Xavier Amatriain, Daniel Arfib, Jordi Bonada, Giovanni De Poli, Pierre Dutilleux, Gianpaolo Evangelista, Florian Keiler, Alex Loscos, Davide Rocchesso, Mark Sandler, Xavier Serra, Todor Todoroff, Contributor Udo Zölzer, Xavier Amatriain, Daniel Arfib, John Wiley and Sons, 2002中描述。
尽管中间信号的数量为3,但是中间信号的数量不仅限于3并且它可以取任何其他值。然而,中间信号的数量优选地应当不超过分量信号的数量。对于MPEG环绕,当输入信号是单声道时,中间信号的优选数量取以下值:2、3或5,这与由MPEG环绕所偏爱的特定配置有关。
图5示出立体声兼容MPEG环绕编码器的架构的实例,并且该图图示了如何创建输入信号101。信号601到605分别是环绕左声道、前左声道、中央声道、前右声道和环绕右声道。这些信号对应于从中创建输入信号101的分量信号。电路610、620和630利用增益实现缩放。电路610利用增益gs缩放信号601。电路620利用增益gc缩放信号603。电路630利用增益gs缩放信号605。其余信号602和604也被缩放,然而因为用于缩放它们的增益取值1,所以实现该缩放的电路在图中被省略(因为此原因,信号602也被称为622,以及信号604也被称为624)。在参数提取电路640中,参数102从加权信号601到605导出。左信号631和右信号632从累加电路650和660中执行的加法获得。在电路650中,与左声道有关的信号621和622和与中央声道有关的信号623相加。类似地,在电路660中,与右声道有关的信号625和624和与中央声道有关的信号623相加。信号631和632随后被编码。立体声输入信号101在解码后表示信号631和632。
输入信号101也可以是单声道信号。图6示出515配置中MPEG环绕下混合的架构的实例,其创建单声道输入信号。电路710、720、730、740和750是倒转的一到二模块,其将两个信号下混合为一个信号。这种单声道输入信号可以适于通过利用增益g缩放来补偿不相等的加权,该增益g被表达为:
其中ci j由一到二(OTT)盒i定义如下:
其中下标i取0到4的值,其中值为0的下标涉及电路750,1涉及电路740,2涉及电路730,3涉及电路710,而4涉及电路720。下标j取值1或2并且指示MPEG环绕解码器配置(图6的倒转)中对应的OTT盒i的输出声道。用于ci j的表达式使用特定类型的函数f(IID),然而其他类型也是可能的。上述配置是MPEG环绕所规定的可能的配置之一。其他配置也是可能的,然而用于增益g的表达式应当适于所使用的配置。表1示出g1到g6的增益值,其是从用于创建输入信号101的权重导出的。
表I-用于具有对应的校准增益的两个MPEG环绕515配置的声道排序。
在另一个实施例中,利用被计算为另外的增益的加权和的增益120缩放输入信号101,其中该另外的增益从对应于加权的分量信号的参数102导出,其中该另外的增益用从加权的分量信号或加权的分量信号的组合对输入信号的相对贡献导出的权重来加权。加权的分量信号或加权的分量信号的组合的相对贡献从对输入信号做出贡献的各加权的分量信号之间的强度差导出,其中该强度差从参数102导出。如上所示,信号103a和103b因此可以被表达为下述矩阵乘法的结果:
,其可以被表达为:
其中增益g1和g2被称为另外的增益。
图7示出包括调适应用于输入信号101的发送效果处理的发送效果设备的实施例,而图8示出包括依赖于参数调适输出信号本身的发送效果设备的实施例。这两个实施例示出,可以在不同阶段,还有在发送效果处理期间或作为发送效果处理之后的后期处理实现输入信号101的调适。在第一种情况下,图7的发送效果处理电路110具有向其提供参数102的附加输入。该发送效果处理本身适于包括例如借助于缩放对输入信号101的调适。在第二种情况下,在发送效果处理电路110中,输出调适电路130被馈送有因将发送效果应用到输入信号101而得到的信号。输出调适电路130还具有作为输入的参数102。本领域技术人员应当清楚,应当如何调适发送效果处理电路110或输出调适电路应当做什么。
对于图8的实施例,调适发送效果处理可以通过将增益g应用到电路510的输出和电路510的输出这二者来实现,电路510和电路520执行发送效果处理,增益gm被表达为:
所述增益可以被延迟和/或被调节以合并例如与回响效果有关的时间扩展效果。在这种情况下,增益gm 被修改以使得:
其中,例如
其中α为根据信号强度通过回响在随后帧上的时间扩展加权当前帧(n)和前一个帧(n-1)的增益的系数。
在另一个实施例中,根据MPEG环绕标准,输入信号和参数分别是下混合信号和参数。基于对附图的描述,输入信号对下混合以及参数对MPEG环绕的空间参数的关系应当是清楚的。
图9示出双耳解码器的实施例,其包括与发送效果设备并联的双耳再现器。该图不同于图1,不同之处在于发送设备100具有用于提供参数102的附加输入。
尽管已经结合一些实施例描述了本发明,但是本发明不旨在受限于本文提出的特定形式。相反地,本发明的范围仅由所附权利要求限定。此外,尽管某个特征可以看上去是结合特定实施例描述的,但是本领域技术人员将认识到所述实施例的各种特征可以根据本发明而组合。在权利要求中,术语包括不排除其他元件或步骤的存在。
而且,尽管被单独列出,但是多个装置、元件或方法步骤可以通过例如单个单元或处理器实现。此外,尽管单独的特征可以包含在不同的权利要求中,但是这些单独特征可能可以有利地组合,并且包含在不同的权利要求中并不意味着特征的组合是不可行的和/或不是有利的。而且,特征包含在一类权利要求中并不意味着限于该类别,而是指示在适当时候该特征同样适用于其他权利要求类别。此外,单数引用不排除多个。因此,对“一”、“一个”、“第一”、“第二”等的引用不排除多个。权利要求中的附图标记仅作为澄清性实例而提供并且不应当被解释为以任何方式限制权利要求的范围。本发明可以借助于包括若干不同元件的硬件并借助于适当编程的计算机或其他可编程设备来实现。

Claims (10)

1.一种通过将发送效果处理应用到输入信号(101)而从输入信号(101)生成输出信号(121)的方法,其中所述输入信号包括分量信号的加权和,其中各加权的分量信号之间的相依性用参数(102)表示,该方法的特征在于包括步骤:
通过将发送效果处理应用到所述输入信号(101)而生成所述输出信号(121),所述输出信号(121)依赖于所述参数(102)而生成,以便补偿输入信号中所包含的分量信号的不相等加权。
2.如权利要求1所述的方法,其中输入信号(101)被分解为多个中间信号(401,402,403),其中每个中间信号利用相应增益(420)缩放以补偿输入信号(101)中所包含的分量信号的不相等的加权。
3.如权利要求2所述的方法,其中对应于相应中间信号的相应增益被计算为预定的另外的增益的加权和,其中所述预定的另外的增益从用于创建输入信号(101)的权重导出,其中所述预定的另外的增益利用从加权的分量信号对相应中间信号的相对贡献导出的相应权重来加权。
4.如权利要求3所述的方法,其中加权的分量信号对相应中间信号的相对贡献从对中间信号做出贡献的各加权分量信号之间的强度差导出,其中该强度差从所述参数(102)导出。
5.如权利要求1所述的方法,其中输入信号(101)利用被计算为另外的增益的加权和的增益(120)来缩放,其中所述另外的增益从对应于加权的分量信号的参数(102)导出,其中所述另外的增益利用从加权的分量信号或加权的分量信号的组合对输入信号的相对贡献导出的权重来加权。
6.如权利要求5所述的方法,其中加权的分量信号或加权的分量信号的组合的相对贡献从对输入信号做出贡献的各加权的分量信号之间的强度差导出,其中该强度差从参数(102)导出。
7.如权利要求1所述的方法,其中输出信号(104)利用依赖于参数(102)而被调节的增益来缩放。
8.如权利要求1所述的方法,其中根据MPEG环绕标准,输入信号和参数分别为下混合信号和空间参数。
9.一种用于从输入信号(101)生成输出信号(121)的发送效果设备(100),该发送效果设备(100)包括用于将发送效果应用到输入信号的发送效果处理电路(110),其中该输入信号(101)包括分量信号的加权和,其中各加权分量信号之间的相依性由参数(102)表示,其特征在于所述发送效果设备包括用于依赖于参数(102)生成输出信号(121)以补偿输入信号(101)中所包含的分量信号的不相等加权的装置。
10.一种用于生成改善的双耳输出信号(301)的双耳解码器(800),该双耳解码器(800)包括:
- 双耳再现器(200),用于将输入信号解码为双耳输出信号(201),该双耳再现器是MPEG环绕双耳解码器,
- 根据权利要求9的发送效果设备(100),用于生成输出信号(121),以及
- 加法电路(300),用于将输出信号(121)添加到双耳输出信号(201)以获得改善的双耳输出信号(301)。
CN200980151965.8A 2008-12-22 2009-12-16 通过发送效果处理生成输出信号 Active CN102265647B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP08172499 2008-12-22
EP08172499.9 2008-12-22
PCT/IB2009/055779 WO2010073187A1 (en) 2008-12-22 2009-12-16 Generating an output signal by send effect processing

Publications (2)

Publication Number Publication Date
CN102265647A CN102265647A (zh) 2011-11-30
CN102265647B true CN102265647B (zh) 2015-05-20

Family

ID=41663789

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200980151965.8A Active CN102265647B (zh) 2008-12-22 2009-12-16 通过发送效果处理生成输出信号

Country Status (8)

Country Link
US (1) US9591424B2 (zh)
EP (1) EP2380364B1 (zh)
JP (1) JP5679340B2 (zh)
KR (1) KR101595995B1 (zh)
CN (1) CN102265647B (zh)
PL (1) PL2380364T3 (zh)
RU (1) RU2011130551A (zh)
WO (1) WO2010073187A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2523472A1 (en) 2011-05-13 2012-11-14 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method and computer program for generating a stereo output signal for providing additional output channels
BR122020017207B1 (pt) 2013-08-28 2022-12-06 Dolby International Ab Método, sistema de processamento de mídia, aparelho e meio de armazenamento legível por computador não transitório

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1469682A (zh) * 2002-07-17 2004-01-21 矽统科技股份有限公司 回响音效处理器
CN101040565A (zh) * 2004-10-14 2007-09-19 杜比实验室特许公司 用于移动立体声内容的改善的头相关传递函数
WO2007140809A1 (en) * 2006-06-02 2007-12-13 Dolby Sweden Ab Binaural multi-channel decoder in the context of non-energy-conserving upmix rules

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006060279A1 (en) * 2004-11-30 2006-06-08 Agere Systems Inc. Parametric coding of spatial audio with object-based side information
JP4944029B2 (ja) * 2005-07-15 2012-05-30 パナソニック株式会社 オーディオデコーダおよびオーディオ信号の復号方法
US8654983B2 (en) * 2005-09-13 2014-02-18 Koninklijke Philips N.V. Audio coding
WO2007080225A1 (en) * 2006-01-09 2007-07-19 Nokia Corporation Decoding of binaural audio signals
WO2007080211A1 (en) * 2006-01-09 2007-07-19 Nokia Corporation Decoding of binaural audio signals
ES2376889T3 (es) * 2006-03-24 2012-03-20 Dolby International Ab Generación de mezclas descendentes espaciales a partir de representaciones paramétricas de señales multicanal
US8634577B2 (en) * 2007-01-10 2014-01-21 Koninklijke Philips N.V. Audio decoder
KR20080073925A (ko) * 2007-02-07 2008-08-12 삼성전자주식회사 파라메트릭 부호화된 오디오 신호를 복호화하는 방법 및장치
US7782235B1 (en) * 2007-04-30 2010-08-24 V Corp Technologies, Inc. Adaptive mismatch compensators and methods for mismatch compensation
AU2009275418B9 (en) * 2008-07-31 2014-01-09 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Signal generation for binaural signals

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1469682A (zh) * 2002-07-17 2004-01-21 矽统科技股份有限公司 回响音效处理器
CN101040565A (zh) * 2004-10-14 2007-09-19 杜比实验室特许公司 用于移动立体声内容的改善的头相关传递函数
WO2007140809A1 (en) * 2006-06-02 2007-12-13 Dolby Sweden Ab Binaural multi-channel decoder in the context of non-energy-conserving upmix rules

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
《Multi-channel goes mobile: MPEG surround binaural rendering》;Jeroen Brebaart;《AES INTERNATIONAL CONFERENCE. AUDIO FOR MOBILE AND HANDHELDDEVICES》;20060902;第3部分 *

Also Published As

Publication number Publication date
JP2012513700A (ja) 2012-06-14
PL2380364T3 (pl) 2013-03-29
CN102265647A (zh) 2011-11-30
EP2380364B1 (en) 2012-10-17
US9591424B2 (en) 2017-03-07
KR20110112376A (ko) 2011-10-12
WO2010073187A1 (en) 2010-07-01
RU2011130551A (ru) 2013-01-27
JP5679340B2 (ja) 2015-03-04
KR101595995B1 (ko) 2016-02-22
EP2380364A1 (en) 2011-10-26
US20110249758A1 (en) 2011-10-13

Similar Documents

Publication Publication Date Title
US8280743B2 (en) Channel reconfiguration with side information
RU2419249C2 (ru) Аудиокодирование
RU2365063C2 (ru) Метод смешивания звуковых каналов с использованием коррелированных выходных данных
JP2019134475A (ja) レンダリング方法、レンダリング装置及び記録媒体
CN112205006B (zh) 音频内容的自适应再混合
KR101569032B1 (ko) 오디오 신호의 디코딩 방법 및 장치
US8605914B2 (en) Nonlinear filter for separation of center sounds in stereophonic audio
JP5934784B2 (ja) 分解器を使用する出力信号を生成するための装置および方法
CN112492501B (zh) 使用呈现变换参数的音频编码和解码
JP2011517547A (ja) マイクロホン配列からのサラウンド・サウンド生成
CN101112120A (zh) 处理多声道音频输入信号以从其中产生至少两个声道输出信号的装置和方法、以及包括执行该方法的可执行代码的计算机可读介质
US20090292544A1 (en) Binaural spatialization of compression-encoded sound data
US8705779B2 (en) Surround sound virtualization apparatus and method
EP4121958A1 (en) Rendering reverberation
Bai et al. Upmixing and downmixing two-channel stereo audio for consumer electronics
Jot et al. Binaural simulation of complex acoustic scenes for interactive audio
JP2016536855A (ja) マルチチャンネル信号をダウンミックスし、ダウンミックス信号をアップミックスする方法及び装置
JP2006033847A (ja) 最適な仮想音源を提供する音響再生装置及び音響再生方法
KR101637407B1 (ko) 부가적인 출력 채널들을 제공하기 위하여 스테레오 출력 신호를 발생시키기 위한 장치와 방법 및 컴퓨터 프로그램
CN102265647B (zh) 通过发送效果处理生成输出信号
US8027494B2 (en) Acoustic image creation system and program therefor
CN112823534B (zh) 信号处理设备和方法以及程序
KR20190060464A (ko) 오디오 신호 처리 방법 및 장치
TWI352511B (en) Method and apparatus for decoding a signal
KR20060131806A (ko) 음향 합성 및 공간화 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant