CN101410891A - 使用空间线索控制多目标或多声道音频信号的渲染的方法和装置 - Google Patents

Abstract

本发明涉及控制多目标或多声道音频信号的渲染。本发明提供了一种用于在解码多目标或多声道音频信号的处理中基于空间线索来控制多目标或多声道音频信号的渲染的方法和装置。为了实现该目的，所述发明中建议的方法在解码多目标或多声道音频信号的处理中控制空间线索域中的渲染。

Description

使用空间线索控制多目标或多声道音频信号的渲染的方法和装置

技术领域

本发明涉及控制多目标或多声道音频信号的渲染(rendering)；并更具体地涉及一种当解码多目标或多声道音频信号时基于空间线索(spatial cue)控制多目标或多声道音频信号的渲染的方法和装置。

背景技术

图1图解说明了用于编码多目标或多声道音频信号的传统编码器的示例。参考该附图，空间音频编码(Spatial Audio Coding，SAC)编码器101被展示为传统的多目标或多声道音频信号编码器的示例，并且它从输入信号(即多目标或多声道音频信号)中提取空间线索(将在后面描述)，并且传送该空间线索，同时对该音频信号进行缩混(down-mixing)，并且以单声道(mono)信号或者立体声(stereo)信号的形式来传送该音频信号。

SAC技术涉及一种将多目标或多声道音频信号表示为缩混的单声道或立体声信号和空间线索信息、并且传送和恢复它们的方法。SAC技术甚至能够以低位速率传送高质量多声道信号。SAC技术集中于根据每个子带分析多目标或多声道音频信号，并且根据每个子带的空间线索信息从缩混的信号中恢复原始信号。因此，空间线索信息包括用于在解码处理中恢复原始信号所需的重要信息，并且该信息变成确定在SAC解码设备中恢复的音频信号的声音质量的主要因素。基于SAC技术的运动图像专家组(MPEG)正在经受MPEG环绕名义的标准化，并且声道电平差(Channel Level Difference，CLD)被用作空间线索。

本发明致力于一种用于在多目标或多声道音频信号被缩混并且从编码器传送并被解码的同时、基于从编码器传送的空间线索来控制多目标或多声道音频信号的渲染的装置和方法。

按照惯例，配备有频率分析器的图形均衡器通常被用来恢复单声道或立体声音频信号。多目标或多声道音频信号可以在空间内不同地定位。然而，从多目标或多声道音频信号生成的音频信号的位置对当前技术中的解码设备来说被唯一地识别和恢复。

发明内容

技术问题

本发明的一个实施例致力于提供一种当解码多目标或多声道音频信号时基于空间线索控制多目标或多声道音频信号的渲染的装置和方法。

本发明的其他方面和优点可以通过下列描述来理解，并且参考本发明的实施例而变得明显。而且，对于本发明领域的相关技术人员来说明显的是，本发明的方面和优点可以通过要求保护的部件及其组合来实现。

技术方案

根据本发明的一方面，提供了一种用于控制音频信号的渲染的装置，包括：解码器，用于使用空间音频编码(SAC)解码方法来解码输入音频信号，所述输入音频信号是按照SAC方法编码的缩混信号；和空间线索渲染器，用于接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息。这里，该解码器基于由空间线索渲染器控制的受控空间线索信息对输入音频信号进行渲染。

根据本发明的另一方面，提供了一种用于控制音频信号的渲染的装置，包括：解码器，用于使用SAC方法来解码输入音频信号，所述输入音频信号是按照SAC方法编码的缩混信号；和空间线索渲染器，用于接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息。这里，该解码器基于由空间线索渲染器控制的空间线索信息进行输入音频信号的渲染，和所述空间线索信息是表示输入音频信号之间的电平差并表达为D_CLD ^Q(ott，l，m)的声道电平差(CLD)值。该空间线索渲染器包括：CLD分析单元，用于从编码部件传送的CLD中提取CLD参数；增益因子转换单元，用于从自CLD分析单元中提取的CLD参数中提取每个音频信号的功率增益；和增益因子控制单元，用于通过基于有关输入音频信号的渲染的控制信息控制在增益因子转换单元中提取的每个音频信号的功率增益，来计算受控功率增益，m表示子带的索引，l表示D_CLD ^Q(ott，l，m)中的参数组的索引。

根据本发明的另一方面，提供了一种用于控制音频信号的渲染的装置，包括：解码器，用于使用空间音频编码(SAC)方法来解码输入音频信号，所述输入音频信号是按照SAC方法编码的缩混信号；和空间线索渲染器，用于接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息。这里，该解码器基于由空间线索渲染器控制的空间线索信息来进行输入音频信号的渲染，和从缩混的信号L0和R0中提取中央信号(C)、左半平面信号(Lf+Ls)和右半平面信号(Rf+Rs)，和所述空间线索信息是表示输入音频信号之间的电平差并表达为CLD_LR/Clfe，CLD_L/R，CLD_C/lfe，CLD_Lf/Ls和CLD_Rf/Rs的CLD值。该空间线索渲染器包括：CLD分析单元，用于从编码器传送的CLD中提取CLD参数；增益因子转换单元，用于从自CLD分析单元中提取的CLD参数中提取每个音频信号的功率增益；和增益因子控制单元，用于通过基于有关输入音频信号的渲染的控制信息控制在增益因子转换单元中提取的每个音频信号的功率增益，来计算受控功率增益。

根据本发明的另一方面，提供了一种用于控制音频信号的渲染的装置，包括：解码器，用于使用SAC方法来解码输入音频信号，所述输入音频信号是按照SAC方法编码的缩混信号；和空间线索渲染器，用于接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息。这里，该解码器基于由空间线索渲染器控制的空间线索信息进行输入音频信号的渲染，和所述空间线索信息是表示输入音频信号的缩混率的声道预测系数(CPC)和表示输入音频信号之间的电平差的声道电平差(CLD)值。该空间线索渲染器包括：CPC/CLD分析单元，用于从编码器传送的CPC和CLD中提取CPC参数和CLD参数；增益因子转换单元，用于通过从在CPC/CLD分析单元中提取的CPC参数中提取中央信号、左半平面信号和右半平面信号并且从CLD参数中提取左信号分量和右信号分量的功率增益，而提取每个信号的功率增益；和增益因子控制单元，用于通过基于有关输入音频信号的渲染的控制信息控制在增益因子转换单元中提取的每个音频信号的功率增益，而计算受控功率增益。

根据本发明的另一方面，提供了一种用于控制音频信号的渲染的装置，包括：解码器，用于使用SAC方法来解码输入音频信号，所述输入音频信号是按照SAC方法编码的缩混信号；和空间线索渲染器，用于接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息。这里，该解码器基于由空间线索渲染器控制的空间线索信息进行输入音频信号的渲染，和该空间线索信息是表示输入音频信号之间的相关性的声道间相关性(ICC)值，和该空间线索渲染器通过线性内插处理来控制ICC参数。

根据本发明的另一方面，提供了一种用于控制音频信号的渲染的方法，包括步骤：a)使用SAC解码方法来解码输入音频信号，所述输入音频信号是按照SAC方法编码的缩混信号；和b)接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息。这里，基于在空间线索渲染步骤b)中控制的受控空间线索信息，在解码步骤a)中对输入音频信号进行渲染。

根据本发明的另一方面，提供了一种用于控制音频信号的渲染的方法，包括步骤：a)使用SAC方法来解码输入音频信号，所述输入音频信号是按照SAC方法编码的缩混信号；和b)接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息。这里，在解码步骤a)中，基于在空间线索渲染步骤b)中控制的空间线索信息进行输入音频信号的渲染，和所述空间线索信息是表示输入音频信号之间的电平差并表达为D_CLD ^Q(ott，l，m)的CLD值。这里，该空间线索渲染步骤b)包括步骤：b1)从编码器传送的CLD中提取CLD参数；b2)从自CLD分析步骤b1)中提取的CLD参数中提取每个音频信号的功率增益；和b3)通过基于有关输入音频信号的渲染的控制信息控制在增益因子转换步骤b2)中提取的每个音频信号的功率增益，来计算受控功率增益，m表示子带的索引，而l表示D_CLD ^Q(ott，l，m)中的参数组的索引。

根据本发明的另一方面，提供了一种用于控制音频信号的渲染的方法，包括步骤：a)使用SAC方法来解码输入音频信号，所述输入音频信号是按照SAC方法编码的缩混信号；和b)接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息。这里，在解码步骤a)中，基于在空间线索渲染步骤b)中控制的空间线索信息进行输入音频信号的渲染，和从缩混的信号L0和R0中提取中央信号(C)、左半平面信号(Lf+Ls)和右半平面信号(Rf+Rs)，和所述空间线索信息是表示输入音频信号之间的电平差并表达为CLD_LR/Clfe，CLD_L/R，CLD_C/lfe，CLD_Lf/Ls和CLD_Rf/Rs的CLD值。该空间线索渲染步骤b)包括步骤：b1)从编码器传送的CLD中提取CLD参数；b2)从在CLD分析步骤b1)中提取的CLD参数中提取每个音频信号的功率增益；和b3)通过基于有关输入音频信号的渲染的控制信息控制在增益因子转换步骤b2)中提取的每个音频信号的功率增益，来计算受控功率增益，

根据本发明的另一方面，提供了一种用于控制音频信号的渲染的方法，包括步骤：a)使用SAC方法来解码输入音频信号，所述输入音频信号是按照SAC方法编码的缩混信号；和b)接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息。这里，在解码步骤a)中，基于在空间线索渲染步骤b)中控制的空间线索信息，进行输入音频信号的渲染，和所述空间线索信息是表示输入音频信号的缩混率的CPC和表示输入音频信号之间的电平差的CLD。这里，该空间线索渲染步骤b)包括：b1)从编码器传送的CPC和CLD中提取CPC参数和CLD参数；b2)通过从在CPC/CLD分析步骤b1)中提取的CPC参数中提取中央信号、左半平面信号和右半平面信号并且从CLD参数中提取左信号分量和右信号分量的功率增益，而提取每个信号的功率增益；和b3)通过基于有关输入音频信号的渲染的控制信息控制在增益因子转换步骤b2)中提取的每个音频信号的功率增益，来计算受控功率增益。

根据本发明的另一方面，提供了一种用于控制音频信号的渲染的方法，包括步骤：a)使用SAC方法来解码输入音频信号，所述输入音频信号是按照SAC方法编码的缩混信号；和b)接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息。这里，在解码步骤a)中，基于在空间线索渲染步骤b)中控制的空间线索信息，进行输入音频信号的渲染，并且该空间线索信息是表示输入音频信号之间的相关性的声道间相关性(ICC)值，和在空间线索渲染步骤b)中，通过线性内插处理来控制ICC参数。

根据本发明，一旦接收到来自用户或者通信的外部系统的请求，通过直接控制空间线索，可能灵活地控制多目标或多声道音频信号的位置。

有利效果

本发明提供了一种当解码多目标或多声道音频信号时、基于空间线索控制多目标或多声道音频信号的渲染的装置和方法。

附图说明

图1是示出传统的多目标或多声道音频信号编码器的示例图。

图2示出了根据本发明实施例的音频信号渲染控制器。

图3是图解说明恢复的平移(panning)多声道信号的示例图。

图4是描绘根据本发明实施例的当声道电平差(CLD)被用作空间线索时图2中示出的空间线索渲染器的方框图。

图5图解说明了利用恒定功率平移(Constant Power Panning，CPP)将音频信号映射到期望位置的方法。

图6示意性示出了包括信号之间的角度关系的布局。

图7是描绘当SAC解码器处于MPEG环绕立体声模式时根据本发明实施例的空间线索渲染器的详细方框图。

图8图解说明了用于解码多目标或多声道音频信号的空间解码器。

图9图解说明了作为空间解码器的三维(3D)立体声音频信号解码器。

图10是示出应用到图8和图9的空间线索渲染器的实施例的视图。

图11是图解说明采用双声道(binaural)立体声解码的运动图像专家组(MPEG)环绕解码器的视图。

图12是描绘根据本发明另一个实施例的音频信号渲染控制器的视图。

图13是图解说明图12的声场定位器(spatializer)的详细方框图。

图14是描绘本发明实施例所应用到的多声道音频解码器的视图。

具体实施方式

下面的描述仅例示了本发明的原理。即使它们在本说明书中未被清楚地描述或者图解说明，本领域的普通技术人员也可以在本发明的概念和范畴之内实施本发明的原理并且发明各种装置。本说明书中展示的条件性术语和实施例的使用仅旨在使得本发明的概念容易理解，并且它们不限于说明书中提到的实施例和条件。

另外，有关本发明的原理、观点和实施例以及特定实施例的所有详细描述应当被理解为包括结构性和功能性的等效物。所述等效物不仅包括当前已知的等效物，还包括将来要研发的那些等效物，即，被发明来执行相同功能的所有设备，而不管它们的结构如何。

例如，本发明的方框图应当被理解为示出了体现本发明的原理的示例性电路的概念性观点。类似地，所有流程图、状态转换图、伪代码等能够基本上在计算机可读介质中表达，并且无论是否区别地描述了计算机或处理器，它们都应当被理解为表达由计算机或者处理器操作的各种处理。

附图中图示的包括表达为处理器或者类似概念的功能块的各种设备的功能不仅可以使用专用于所述功能的硬件来提供，还可以使用能够运行所述功能的合适软件的硬件来提供。当通过处理器提供功能时，所述功能可以通过单个专用处理器、单个共享处理器、或者多个独立处理器来提供，它们中的一部分可被共享。

术语“处理器”、“控制”或者类似概念的明显的使用不应当被理解为排他地表示能够运行软件的一块硬件，而是应当被理解为含蓄地包括数字信号处理器(DSP)、硬件以及用于存储软件的ROM、RAM和非易失性存储器。这里也可以包括其他已知和公用的硬件。

类似地，可以仅在概念上展示附图中描述的切换。所述切换的功能应当被理解为手动执行，或者通过控制程序逻辑或者专用逻辑来执行，或者通过专用逻辑的交互作用来执行。设计者可以选择特定技术，用以更深入地理解本说明书。

在本说明书的权利要求中，被表达为用于执行在详细描述中所描述的功能的部件的元件意欲包括用于执行包括所有格式的软件的功能的所有方法，例如，用于执行预期功能的电路、固件/微码等的组合。

为了执行预期功能，所述元件与用于执行软件的合适电路协作。由权利要求限定的本发明包括用于执行特定功能的不同的部件，并且所述部件以权利要求中请求的方法相互连接。因此，能够提供所述功能的任何部件应当被理解为等效于从本说明书中概括的部件。

参考附图，从下文所阐述的实施例的下列描述中，本发明的优点、特征和方面将变得明显。如果对相关现有技术的进一步详细描述被确定为模糊了本发明的发明点，则省略所述描述。下文中，将参考附图来详细描述本发明的优选实施例。

图2示出了根据本发明的实施例的音频信号渲染控制器。参考该附图，音频信号渲染控制器采用空间音频编码(SAC)解码器203，该SAC解码器203是对应于图1的SAC编码器101的组成元件，并且音频信号渲染控制器另外包括空间线索渲染器201。

输入到SAC解码器203的信号是从编码器(例如，图1的SAC编码器)传送的缩混的单声道或立体声信号。输入到空间线索渲染器201的信号是从编码器(例如，图1的SAC编码器)传送的空间线索。

空间线索渲染器201控制空间线索域中的渲染。具体地，空间线索渲染器201不通过直接控制SAC解码器203的输出信号来进行渲染，而是通过从空间线索中提取音频信号信息来进行渲染。

这里，空间线索域是其中从编码器传送的空间线索作为参数被识别并且被控制的参数域。渲染是一种通过确定输入音频信号的位置和电平而生成输出音频信号的处理。

SAC解码器203可以采用诸如MPEG环绕、双声道线索编码(BCC)和声源位置线索编码(Sound Source Location Cue Coding，SSLCC)之类的方法，但是本发明不限于此。

根据本发明的实施例，可应用的空间线索被定义为：

声道电平差(CLD)：输入音频信号之间的电平差

声道间相关性(ICC)：输入音频信号之间的相关性

声道预测系数(CPC)：输入音频信号的缩混率

换句话说，CDC是音频信号的功率增益信息，而ICC是音频信号之间的相关性信息。CTD是音频信号之间的时间差信息，而CPC是音频信号的缩混增益信息。

空间线索的主要作用是维持空间图像(即声音场景(scene))。根据本发明，声音场景可以通过控制空间线索参数而不是直接操纵音频输出信号来控制。

当考虑音频信号的再现环境时，最常使用的空间线索是CLD，该CLD单独一个就可以生成基本输出信号。下文中，将基于CLD来描述用于控制空间线索域中的信号的技术作为本发明的实施例。然而，本发明不限于该CLD，并且这对于本发明所属领域的普通技术人员是显而易见的。因此，应当理解，本发明不限于CLD的使用。

根据使用CLD的实施例，可以通过将声音平移定律直接应用于功率增益系数，来平移多目标和多声道音频信号。

根据该实施例，通过控制空间线索，基于整个波段中的平移位置，可以恢复多目标和多声道音频信号。CLD被操纵来估计对应于期望平移位置的每个音频信号的功率增益。该平移位置可以通过从外部输入的交互作用控制信号自由地输入。图3是图解说明所恢复的平移多声道信号的示意图。每个信号以给定角度θ_pan旋转。然后，用户可以识别旋转的声音场景。在附图3中，Lf表示左前声道信号；Ls表示左后声道信号；Rf表示右前声道信号；Rs表示右后声道信号；C表示中央声道信号。因此[Lf+Ls]表示左半平面信号，以及[Rf+Rs]表示右半平面信号。尽管图3中未示出，但是Lfe表示低音扬声器(woofer)信号。

图4是描绘根据本发明实施例的当CLD被用作空间线索时图2中示出的空间线索渲染器的方框图。

参考该附图，使用CLD作为空间线索的空间线索渲染器201包括CLD分析单元401、增益因子转换单元403、增益因子控制单元405、和CLD转换单元407。

CLD分析单元401从接收到的空间线索(即CLD)中提取CLD参数。CLD包括音频信号的电平差信息，并且它被表达为：

${\mathrm{CLD}}_m^i=10\mathrm{lo}{g}_{10}\frac{P_m^k}{P_m^j}$ 公式1

其中P_m ^k表示第m子带中的第k输入音频信号的子带功率。

增益因子转换单元403从在CLD分析单元401中获得的CLD参数中提取每个音频信号的功率增益。

参考公式1，当在第m子带中输入M个音频时，第m子带中可提取的CLD的数目是M-1(1≤i≤M-1)。因此，基于如下表达的公式2，从CLD中获取每个音频信号的功率增益：

$g_m^j=\frac{1}{\sqrt{1+{10}^{{\mathrm{CLD}}_m^i/10}}}=\frac{\sqrt{P_m^j}}{\sqrt{P_m^k+P_m^j}}$

$g_m^k=g_m^j\·{10}^{{\mathrm{CLD}}_m^i/20}=\frac{\sqrt{P_m^j}}{\sqrt{P_m^k+P_m^j}}$ 公式2

因此，从第m子带中的M-1 CLD中可以获取M输入音频信号的功率增益。

同时，由于基于输入音频信号的子带而提取空间线索，因此也基于子带来提取功率增益。当提取第m子带中的所有输入音频信号的功率增益时，它们可被表达为如公式3中所示的矢量矩阵：

$G_m=\left[\begin{array}{c}{g}_m^1\\ g_m^2\\ .\\ .\\ .\\ g_m^M\end{array}\right]$ 公式3

其中m表示子带索引；

g_m ^k表示第m子带中第k输入音频信号(1≤k≤M)的子带功率增益；和

G_m表示指明第m子带中所有输入音频信号的功率增益的矢量。

在增益因子转换单元中提取的每个音频信号的功率增益(G_m)被输入到增益因子控制单元405并且被调节。所述调节控制输入音频信号的渲染，并且最终形成期望的音频场景。

输入到增益因子控制单元405的渲染信息包括输入音频信号的数目(N)、包括突发(burst)和抑制(suppression)的每个输入音频信号的虚拟位置和电平、输出音频信号的数目(M)、以及虚拟位置信息。增益因子控制单元405接收有关输入音频信号的渲染的控制信息，该控制信息是包括输入音频信号的输出位置和输出电平的音频场景信息。该音频场景信息是由外面的用户输入的交互作用控制信号。然后，增益因子控制单元405调节从增益因子转换单元403输出的每个输入音频信号的功率增益(G_m)，并且获取如公式4所示的受控功率增益(_outG_m)。

$G_m^{\mathrm{out}}=\left[\begin{array}{c}g_m^1{}_{\mathrm{out}}\\ g_m^2{}_{\mathrm{out}}\\ .\\ .\\ .\\ g_m^M{}_{\mathrm{out}}\end{array}\right]$ 公式4

例如，当指示(directing)第m子带中的第一输出音频信号(_outg_m ¹)的电平的抑制被输入为渲染控制信息时，增益因子控制单元405基于从增益因子转换单元403输出的每个音频信号的功率增益(G_m)而计算受控功率增益(_outG_m)，如公式5所示。

$G_m^{\mathrm{out}}=\left[\begin{array}{c}g_{\text{m}}^1{}_{\mathrm{out}}\\ g_m^2{}_{\mathrm{out}}\\ .\\ .\\ .\\ g_m^M{}_{\mathrm{out}}\end{array}\right]=\left[\begin{array}{c}0\\ g_m^2\\ .\\ .\\ .\\ g_m^M\end{array}\right]$ 公式5

当对公式5进行更具体地表达时，它等于下列公式6。

公式6

换句话说，通过将矩阵的第m子带中的第一输入音频信号的因子(g_m ¹)调节为0，可以消除第m子带中的第一输出音频信号(_outg_m ¹)的电平。这被称作为抑制。

同样地，可能突发特定输出音频信号的电平。毕竟，根据本发明的实施例，通过改变基于空间线索获得的功率增益值，可以控制输出音频信号的输出电平。

作为本发明的另一实施例，当指示第m子带的第一输入音频信号(g_m ¹)应当位于第m子带的第一输出音频信号(_outg_m ¹)和第二输出音频信号(_outg_m ²)之间的渲染信息(例如，有关平面的角度信息，θ＝45°)被输入到增益因子控制单元405时，增益因子控制单元405基于从增益因子转换单元403输出的每个音频信号的功率增益(G_m)来计算受控功率增益(_outG_m)，如公式7所示。

$G_m^{\mathrm{out}}=\left[\begin{array}{c}g_m^1{}_{\mathrm{out}}\\ g_m^2{}_{\mathrm{out}}\\ .\\ .\\ .\\ g_m^M{}_{\mathrm{out}}{}^{}\end{array}\right]=\left[\begin{array}{c}{g}_m^1\×\frac{1}{\sqrt{2}}\\ g_m^1\×\frac{1}{\sqrt{2}}+g_m^2\\ .\\ .\\ .\\ g_m^M\end{array}\right]$ 公式7

该公式7可被具体表达为下列公式8。

公式8

在输出音频信号之间映射输入音频信号的方法的一般实施例是采用平移定律的映射方法。平移定律包括正弦平移定律、正切平移定律和恒定功率平移定律(CPP定律)。不管平移定律的种类如何，通过平移定律实现的效果都是相同的。

下文中，描述根据本发明实施例的基于CPP在期望位置处映射音频信号的方法。然而，本发明不只限于CPP的使用，并且本发明不限于CPP的使用对于本发明所属领域的普通技术人员是显而易见的

根据本发明的实施例，对于给定平移角度，基于CPP来平移所有多目标或多声道音频信号。而且，CPP未被应用到输出音频信号，而是被应用到从CLD值提取的功率增益，以便利用空间线索。在应用CPP之后，音频信号的受控功率增益被转换为CLD，该CLD被传送到SAC解码器203，从而产生平移的多目标或多声道音频信号。

图5图解说明了根据本发明实施例的利用CPP将音频信号映射到期望位置的方法。如附图所图示，输出信号1和2(_outg_m ¹和_outg_m ²)的位置分别是0°和90°。因此，在图5中，张角为90°。

当第一输入音频信号(g_m ¹)位于输出信号1和2(_outg_m ¹和_outg_m ²)之间的θ处时，α，β值被分别定义为α＝cos(θ)，β＝sin(θ)。根据CPP定律，输入音频信号的位置被投影到输出音频信号的轴，并且使用正弦和余弦函数来计算α，β值。然后，获得受控功率增益，并且控制音频信号的渲染。基于α，β值获取的受控功率增益(_outG_m)被表达为公式9。

$G_m^{\mathrm{out}}=\left[\begin{array}{c}g_m^1{}_{\mathrm{out}}\\ g_m^2{}_{\mathrm{out}}\\ .\\ .\\ .\\ g_m^M{}_{\mathrm{out}}\end{array}\right]=\left[\begin{array}{c}{g}_m^1\×\mathrm{\β}\\ g_m^1\×\mathrm{\α}+g_m^2\\ .\\ .\\ .\\ g_m^M\end{array}\right]$ 公式9

其中α＝cos(θ)，β＝sin(θ)。

公式9可被具体表达为下列公式10。

公式10

其中，α，β值根据其应用的平移定律可以不同。

通过将输入音频信号的功率增益映射到输出音频信号的虚拟位置从而它们符合预定的张角，可以获取α，β值。

根据本发明的实施例，通过控制空间线索域中诸如输入音频信号的功率增益信息之类的空间线索，可以将渲染控制成将输入音频信号映射到期望位置。

上面，已经描述了输入音频信号的功率增益的数目与输出音频信号的功率增益的数目相同的情况。当输入音频信号的功率增益的数目不同于输出音频信号的功率增益的数目时(这是普遍情况)，公式6、8和1的矩阵的维数不被表达为M×M而是M×N。

例如，当输出音频信号的数目是4(M＝4)和输入音频信号的数目是5(N＝5)时并且当渲染控制信息(例如，输入音频信号的位置和输出音频信号的数目)被输入到增益因子控制器405时，增益因子控制器405根据从增益因子转换单元403输出的每个音频信号的功率增益(G_m)计算受控功率增益(_outG_m)。

$G_m^{\mathrm{out}}=\left[\begin{array}{c}g_m^1{}_{\mathrm{out}}\\ g2_m^{\mathrm{out}}\\ g_m^3{}_{\mathrm{out}}\\ g_m^4{}_{\mathrm{out}}\end{array}\right]=\left[\begin{array}{ccccc}{\mathrm{\β}}_1& 0& 0& 0& {\mathrm{\α}}_5\\ {\mathrm{\α}}_1& {\mathrm{\β}}_2& 0& {\mathrm{\α}}_4& 0\\ 0& 0& {\mathrm{\β}}_3& 0& {\mathrm{\β}}_5\\ 0& {\mathrm{\α}}_2& {\mathrm{\α}}_3& {\mathrm{\β}}_4& 0\end{array}\right]\left[\begin{array}{c}{g}_m^1\\ g_m^2\\ g_m^3\\ g_m^4\\ g_m^5\end{array}\right]$ 公式11

根据公式11，N(N＝5)个输入音频信号被如下映射成M(M＝4)个输出音频信号。第一输入音频信号(g_m ¹)基于α₁，β₁值被映射在输出音频信号1和2(_outg_m ¹和_outg_m ²)之间。第二输入音频信号(g_m ²)基于α₂，β₂值被映射在输出音频信号2和4(_outg_m ²和_outg_m ⁴)之间。第三输入音频信号(g_m ³)基于α₃，β₃值被映射在输出音频信号3和4(_outg_m ³和_outg_m ⁴)之间。第四输入音频信号(g_m ⁴)基于α₄，β₄值被映射在输出音频信号2和4(_outg_m ²和_outg_m ⁴)之间。第五输入音频信号(g_m ⁵)基于α₅，β₅值被映射在输出音频信号1和3(_outg_m ¹和_outg_m ³)之间。

简言之，当用于映射在预定的输出音频信号之间的g_m ^k值(其中k是输入音频信号的索引，k＝1，2，3，4，5)的α，β值被定义为α_k，β_k时，可以将N(N＝5)个输入音频信号映射到M(M＝4)个输出音频信号。因此，不管输出音频信号的数目如何，输入音频信号都可被映射到期望位置。

为了使得第k输入音频信号的输出电平为0值，将α_k，β_k值单独地设定为0，这是抑制。

从增益因子控制器405输出的受控功率增益(_outG_m)在CLD转换单元407中被转换为CLD值。通过常用对数的计算，CLD转换单元407将如下列公式12中所示的受控功率增益(_outG_m)转换为转换后的CLD值，其为CLD_m ⁱ。由于受控功率增益(_outG_m)是功率增益，所以乘以20。

转换后的 ${\mathrm{CLD}}_m^i=20{\log }_{10}\frac{g_m^k{}_{\mathrm{out}}}{g_m^j{}_{\mathrm{out}}}$ 公式12

其中CLD转换单元407中获取的CLD_m ⁱ值是从受控功率增益(_outG_m)的因子的组合中获取的，并且比较信号(_outg_m ^k或_outg_m ^j)并非必须对应于用于计算输入CLD值的信号(P_m ^k或P_m ^j)。从M-1个组合中获取转换后的CLD值(CLD_m ⁱ)以表达受控功率增益(_outG_m)可能是足够的。

在CLD转换单元407中获取的转换后的信号(CLD_m ⁱ)被输入到SAC解码器203中。

在下文中，将根据本发明的另一实施例来描述上述增益因子转换单元403、增益因子控制单元405和CLD转换单元407的操作。

增益因子转换单元403从在CLD分析单元401中提取的CLD参数中提取输入音频信号的功率增益。对于每个子带，CLD参数被转换为两个输入信号的增益系数。例如，在称作5152模式的单声道信号传送模式的情况下，基于下列公式13，增益因子转换单元403从CLD参数(D_CLD ^Q(ott，l，m))中提取功率增益(G_0，l，m ^Clfe和G_0，l，m ^LR)。这里，5152模式在由ISO/IEC JTC(国际标准化组织/国际电工委员会联合技术委员会)于2005年2月公布的国际标准MPEG环绕(WDN7136，23003-1：2006/FDIS)中得以详细公开。由于5152模式只是用于描述本发明的单纯实施例，因此这里将不提供对5152模式的详细描述。上述国际标准在其有助于描述本发明的范围内占用了本说明书的一部分。

$G_{0,l,m}^{\mathrm{Clfe}}=\frac{1}{\sqrt{1+{10}^{D_{\mathrm{CLD}}^Q(0,l,m)/10}}}$

$G_{0,l,m}^{\mathrm{LR}}=G_{0,l,m}^{\mathrm{Clfe}}\·{10}^{D_{\mathrm{CLD}}^Q(0,l,m)/20}$ 公式13

其中m表示子带的索引；

l表示参数组的索引；和

Clfe和LR分别表示中央信号与低音扬声器(lfe)信号的总和以及左平面信号(Ls+Lf)与右平面信号(Rs+Rf)的总和。

根据本发明的实施例，所有输入音频信号的功率增益可以基于公式13来计算。

随后，每个子带的功率增益(pG)可以基于下列公式14从输入音频信号的功率增益的乘积来计算。

$p{G}_{l,m}^{\mathrm{Lf}}=G_{1,l,m}^L\·G_{3,l,m}^{\mathrm{Lf}}$

$p{G}_{l,m}^{\mathrm{Ls}}=G_{1,l,m}^L\·G_{3,l,m}^{\mathrm{Ls}}$

$p{G}_{l,m}^{\mathrm{Rf}}=G_{1,l,m}^R\·G_{4,l,m}^{\mathrm{Rf}}$

$p{G}_{l,m}^{\mathrm{Rs}}=G_{1,l,m}^R\·G_{4,l,m}^{\mathrm{Rs}}$

$p{G}_{l,m}^C=G_{1,l,m}^{\mathrm{Clfe}},$ $p{G}_{l,m}^{\mathrm{lfe}}=0$ (m＞1)

$p{G}_{l,m}^{\mathrm{lfe}}=G_{1,l,m}^{\mathrm{Clfe}}\·G_{2,l,m}^{\mathrm{lfe}},$ $p{G}_{l,m}^C=G_{1,l,m}^{\mathrm{Clfe}}\·G_{2,l,m}^C,(m=\mathrm{0,1})$ 公式14

随后，从增益因子转换单元403中提取的每个音频信号的声道增益(pG)被输入到增益因子控制单元405，以被调节。由于输入音频信号的渲染是通过所述调节来控制的，因此最终可以形成期望的音频信号。

根据实施例，将CPP定律应用于一对相邻的声道增益。首先，θ_m值是用于渲染输入音频信号的控制信息，并且它是基于下列公式15从给定的θ_pan值计算出的。

公式15

这里，张角是两个输出信号之间的角度，并且θ₁值(θ₁＝0)是基准输出信号的位置的角度。例如，图6示意性示出了包括角度之间的关系的立体声布局。

因此，基于控制信息(θ_pan)的用于渲染输入音频信号的平移增益如下列公式16所定义。

pG_c1＝coS(θ_m)

pG_c2＝sin(θ_m)                      公式16

当然，张角角度根据输出信号之间的角度而变化。当输出信号是前面一对(C和Lf或者C和Rf)时，张角角度是30°；当输出信号是侧面一对(Lf和Ls或者Rf和Rs)时，张角角度是80°；以及当输出信号是后面一对(Ls和Rs)时，张角角度是140°。对于每个子带中的所有输入音频信号，根据平移角度来获取基于CPP定律控制的受控功率增益(例如，公式4的_outG_m)。

从增益因子控制单元405输出的受控功率增益在CLD转换单元407中被转换为CLD值。通过下列公式17中表达的对受控功率增益的常用对数的计算，CLD转换单元407被转换为与作为转换后的CLD值的CLD_m ⁱ值对应的作为CLD值的D_CLD ^modified值。CLD值(D_CLD ^modified)被输入到SAC解码器203。

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(0,l,m)={20\log }_{10}\left(\frac{{\mathrm{pG}}_{\mathrm{Lf}}(l,m)}{{\mathrm{pG}}_{\mathrm{Ls}}(l,m)}\right)$

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(1,l,m)={20\log }_{10}\left(\frac{{\mathrm{pG}}_{\mathrm{Rf}}(l,m)}{{\mathrm{pG}}_{\mathrm{Rs}}(l,m)}\right)$

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(2,l,m)={10\log }_{10}\left(\frac{{\mathrm{pG}}_{\mathrm{Lf}}^2(l,m)+{\mathrm{pG}}_{\mathrm{Ls}}^2(l,m)}{{\mathrm{pG}}_{\mathrm{Rf}}^2(l,m)+{\mathrm{pG}}_{\mathrm{Rs}}^2(l,m)}\right)$

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(3,l,m)={20\log }_{10}\left(\frac{{\mathrm{pG}}_C(l,m)}{{\mathrm{pG}}_{\mathrm{lfe}}(l,m)}\right)$

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(4,l,m)={10\log }_{10}\left(\frac{{\mathrm{pG}}_{\mathrm{Lf}}^2(l,m)+{\mathrm{pG}}_{\mathrm{Ls}}^2(l,m)+{\mathrm{pG}}_{\mathrm{Rf}}^2(l,m)+{\mathrm{pG}}_{\mathrm{Rs}}^2(l,m)}{{\mathrm{pG}}_C^2(l,m)+{\mathrm{pG}}_{\mathrm{lfe}}^2(l,m)}\right)$

                                              公式17

下文中，描述当SAC解码器203是作为所谓525模式的MPEG环绕立体声模式时将CLD、CPC和ICC用作空间线索的结构。在MPEG环绕立体声模式中，左信号L0和右信号R0被接收为输入音频信号，多声道信号被输出为输出信号。MPEG环绕立体声模式在由ISO/IEC JTC于2005年2月发布的国际标准MPEG环绕(WD N7136，23003-1：2006/FDIS)中得以详细地描述。在本发明中，MPEG环绕立体声模式只是用于描述本发明的实施例。因此，将不提供对其的详细描述，并且国际标准在有助于理解本发明的范围之内形成本说明书的一部分。

当SAC解码器203是MPEG环绕立体声模式时，SAC解码器203用于从输入音频信号L0和R0生成多声道信号所需的矢量的对角矩阵元素被固定为0，如公式18所示。这意味着在MPEG环绕立体声模式中，R0信号对Lf和Ls信号的生成没有帮助，以及L0信号对Rf和Rs信号的生成没有帮助。因此，基于用于渲染输入音频信号的控制信息，不可能对音频信号执行渲染。

$R_1^{l,m}=\left[\begin{array}{cc}{w}_{11}^{l,m}& 0\\ 0& w_{22}^{l,m}\\ w_{31}^{l,m}\sqrt{2}& w_{32}^{l,m}\sqrt{2}\\ w_{11}^{l,m}& 0\\ 0& w_{22}^{l,m}\end{array}\right],$ 公式18

其中w_ij ^l，m是从自CLD获取的功率增益中生成的系数(i和j是矢量矩阵索引；

m是子带索引；以及l是参数组索引)。

用于MPEG环绕立体声模式的CLD包括CLD_LR/Clfe，CLD_L/R，CLD_C/lfe，CLD_Lf/Ls和CLD_Rf/Rs。CLD_Lf/Ls是左后声道信号(Ls)和左前声道信号(Lf)之间的子带功率比(dB)，而CLD_Rf/Rs是右后声道信号(Rs)和右前声道信号(Rf)之间的子带功率比(dB)。其他CLD值是如其下标标注的声道的功率比。

MPEG环绕立体声模式的SAC解码器203从基于公式18输入的右和左信号(L0，R0)中提取中央信号(C)、左半平面信号(Ls+Lf)和右半平面信号(Rf+Rs)。左半平面信号(Ls+Lf)中的每一个。右半平面信号(Rf+Rs)和左半平面信号(Ls+Lf)被分别用来生成右信号分量(Rf，Rs)和左信号分量(Ls，Lf)。

从公式18中可以看出左半平面信号(Ls+Lf)是从输入的左信号(L0)中生成的。简言之，右半平面信号(Rf+Rs)和中央信号(C)对左信号分量(Ls，Lf)的生成没有帮助。相反，情况是相同的。(也就是，R0信号对Lf和Ls信号的生成没有帮助，并且类似地，L0信号对Rf和Rs信号的生成没有帮助)。这意味着平移角度局限为大约±30°用以渲染音频信号。

根据本发明的实施例，上面的公式18被修改为公式19，以便灵活地控制多目标或多声道音频信号的渲染。

$R_1^{\′l,m}=\left[\begin{array}{cc}{w}_{11}^{l,m}& w_{12}^{\′l,m}\\ w_{21}^{\′l,m}& w_{22}^{l,m}\\ w_{31}^{l,m}\sqrt{2}& w_{32}^{l,m}\sqrt{2}\\ w_{11}^{l,m}& w_{12}^{l,m}\\ w_{21}^{\′l,m}& w_{22}^{l,m}\end{array}\right],$ 0≤m＜m_tttLowProc(0)，0≤l＜L

                                    公式19

其中m_tttLowProc表示子带的数目。

与公式18不同，公式19表明右半平面信号(Rf+Rs)和中央信号(C)对左信号分量(Ls，Lf)的生成有帮助，反之亦然(这表明R0信号对Lf和Ls信号的生成有帮助，并且类似地，L0信号对Rf和Rs信号的生成有帮助)。这意味着平移角度不局限用以渲染音频信号。

图2和图4中示出的空间线索渲染器201基于输入音频信号的功率增益和用于渲染输入音频信号的控制信息(例如，从外部输入的交互作用控制信号)，而输出受控功率增益(_outG_m)或者转换后的CLD值(CLD_m ⁱ)，所述受控功率增益(_outG_m)或者转换后的CLD值(CLD_m ⁱ)被用来计算系数(w_ij ^l，m)，该系数形成公式19的矢量。元素w′₁₂ ^l，m、w′₂₁ ^l，m、w′₃₁ ^l，m和w′₃₂ ^l，m如下列公式20所定义。

$w_{12}^{\′l,m}=\frac{P_{\mathrm{pan}}^L}{\sqrt{P_C/2+P_{\mathrm{Rf}}+P_{\mathrm{Rs}}}}$

$w_{21}^{\′l,m}=\frac{P_{\mathrm{pan}}^R}{\sqrt{P_C/2+P_{\mathrm{Lf}}+P_{\mathrm{Ls}}}}$

$w_{13}^{\′l,m}=\frac{P_{\mathrm{pan}}^{\mathrm{CL}}}{\sqrt{\mathrm{Pc}/2+P_{\mathrm{Rf}}+P_{\mathrm{Rs}}}}$

$w_{31}^{\′l,m}=\frac{P_{\mathrm{pan}}^{\mathrm{CR}}}{\sqrt{P_C/2+P_{\mathrm{Lf}}+P_{\mathrm{Ls}}}}$ 公式20

w′₁₂ ^l，m和w′₂₁ ^l，m的功能不是提取中央信号分量(C)而是以平移角度将半平面信号投影到相反的半平面。w′₁₁ ^l，m和w′₂₂ ^l，m如下列公式21所定义。

${\left(w_{11}^{\′l,m}\right)}^2+{\left(w_{21}^{\′l,m}\right)}^2+{\left(w_{31}^{\′l,m}\right)}^2=1$

${\left(w_{12}^{\′l,m}\right)}^2+{\left(w_{22}^{\′l,m}\right)}^2+{\left(w_{32}^{\′l,m}\right)}^2=1$ 公式21

其中功率增益(P_C，P_Lf，P_Ls，P_Rf，P_Rs)是基于根据公式2从CLD分析单元401输入的CLD值(CLD_LR/Clfe，CLD_L/R，CLD_C/lfe，CLD_Lf/Ls和CLD_Rf/Rs)来计算的。

P_pan ^L是基于平移定律的投影功率，与P_C，P_Lf，P_Ls的组合成比例。类似地，P_pan ^R与P_C，P_Rf，P_Rs的组合成比例。P_pan ^CL和P_pan ^CR分别是对于左半平面的中央声道和右半平面的中央声道的平移功率增益。

公式19到21旨在根据作为交互作用控制信号的控制信息灵活地控制输入音频信号的左信号(L0)和右信号(R0)的渲染。增益因子控制单元405接收控制信息，该控制信息是用于渲染输入音频信号的交互作用控制信号，例如，角度信息θ_pan＝40°。然后，它调节从增益因子转换单元403输出的每个输入音频信号的功率增益(P_C，P_Lf，P_Ls，P_Rf，P_Rs)，并且如下列公式22所示计算附加的功率增益(P_pan ^L，P_pan ^R，P_pan ^CL和P_pan ^CR)。

$P_{\mathrm{pan}}^{\mathrm{CR}}=P_C/2+{\mathrm{\α}}^2\·P_{\mathrm{Lf}}=P_C/2+{\left(\cos \left({\mathrm{\θ}}_m\right)\right)}^2\·P_{\mathrm{Lf}}$

$P_{\mathrm{pan}}^R={\mathrm{\β}}^2\·P_{\mathrm{Lf}}={\left(\sin \left({\mathrm{\θ}}_m\right)\right)}^2\·P_{\mathrm{Lf}}$

$P_{\mathrm{pan}}^{\mathrm{CL}}=P_C/2$

$P_{\mathrm{pan}}^L=0$ 公式22

其中α＝cos(θ_pan)，β＝sin(θ_pan)；并且θ_m如公式15中所定义。

所获取的功率增益(P_C，P_Lf，P_Ls，P_Rf，P_Rs、P_pan ^L、P_pan ^R、P_pan ^CL和P_pan ^CR)被输出为受控功率增益，它们在下列公式23中展示。

$g_m^{\mathrm{Lf}}{}_{\mathrm{out}}=0$

$g_m^{\mathrm{Ls}}{}_{\mathrm{out}}=\sqrt{P_{\mathrm{Ls}}}$

$g_m^{\mathrm{Rf}}{}_{\mathrm{out}}=\sqrt{P_{\mathrm{Rf}}+P_{\mathrm{pan}}^R}$

$g_m^{\mathrm{Rs}}{}_{\mathrm{out}}=\sqrt{P_{\mathrm{Rs}}}$

$g_m^{\mathrm{CL}}{}_{\mathrm{out}}=\sqrt{P_C/2=P_{\mathrm{pan}}^{\mathrm{CL}}}$

$g_m^{\mathrm{CR}}{}_{\mathrm{out}}=\sqrt{P_{\mathrm{pan}}^{\mathrm{CR}}}$ 公式23

这里，对于CL和CR，单独地计算中央信号(C)，因为应该从L0和R0两者中计算出中央信号。在MPEG环绕立体声模式中，增益因子控制单元405输出公式23的受控功率增益，并且通过将受控功率增益应用于基于公式19的矢量输入的输入音频信号L0和R0，SAC解码器203基于有关输入音频信号的渲染的控制信息(即交互作用控制信号)来对输入音频信号执行渲染。

这里，L0和R0应当被预混音或预处理，以便基于如公式20表达的矩阵元素来获得公式19的矢量，从而在SAC解码器203中基于公式19的矢量来控制输入音频信号L0和R0的渲染。预混音或预处理使得可能控制受控功率增益(_outG_m)或者转换后的CLD值(CLD_m ⁱ)的渲染。

图7是描绘当SAC解码器203处于MPEG环绕立体声模式时、根据本发明实施例的空间线索渲染器201的详细方框图。如所示，使用CLD或CPC作为空间线索的空间线索渲染器201包括CPC/CLD分析单元701、增益因子转换单元703、增益因子控制单元705、和CLD转换单元707。

当SAC解码器203在MPEG环绕立体声模式中使用CPC和CLD作为空间线索时，CPC基于编码器中的一些合适的标准进行预测，以便确保用于播放的缩混信号和输出信号的质量。结果，CPC表示压缩的增益比，并且在本发明的实施例中，它被传递到音频信号渲染装置。

毕竟，在空间线索渲染器201中，有关标准的信息的缺乏阻碍了对CPC参数的精确分析。换句话说，即使空间线索渲染器201可以控制音频信号的功率增益，但是一旦音频信号的功率增益根据有关音频信号的渲染的控制信息(例如，交互作用控制信号)而改变(其意思是指“受控”)，则从音频信号的受控功率增益中没有计算出CPC值。

根据本发明的实施例，通过CPC从输入音频信号L0和R0中提取中央信号(C)、左半平面信号(Ls+Lf)和右半平面信号(Rs+Rf)。从CLD中提取其他音频信号，包括左信号分量(Ls，Lf)和右信号分量(Rf，Rs)。计算所提取的音频信号的功率增益。不通过直接操纵音频输出信号，而是通过控制空间线索参数，来控制声音场景，从而根据有关音频信号的渲染的控制信息来改变(即控制)获取的功率增益。

首先，CPC/CLD分析单元701从接收到的空间线索(它们是CPC和CLD)中提取CPC参数和CLD参数。增益因子转换单元703基于下列公式24从在CPC/CLD分析单元701中提取的CPC参数中提取中央信号(C)、左半平面信号(Ls+Lf)和右半平面信号(Rf+Rs)。

$M_{\mathrm{PDC}}\left[\begin{array}{c}{l}_0\\ r_0\end{array}\right]=\left[\begin{array}{c}l\\ r\\ c\end{array}\right]$

$M_{\mathrm{PDC}}=\left[\begin{array}{cc}{c}_{11}& c_{12}\\ c_{21}& c_{22}\\ c_{31}& c_{32}\end{array}\right]$ 公式24

其中l₀，r₀，l，r，c分别表示输入的音频信号L0和R0、左半平面信号(Ls+Lf)、右半平面信号(Rf+Rs)和中央信号(C)；和M_PDC表示CPC系数矢量。

增益因子转换单元703计算中央信号(C)、左半平面信号(Ls+Lf)、和右半平面信号(Rf+Rs)的功率增益，并且它也计算其他音频信号的功率增益，包括分别来自在CPC/CLD分析单元701中提取的CLD参数(CLD_Lf/Ls，CLD_Rf/Rs)的左信号分量(Ls，Lf)和右信号分量(Rf，Rs)，例如公式2。因此，子带的功率增益被全部获取。

随后，增益因子控制单元705接收有关输入音频信号的渲染的控制信息(即交互作用控制信号)，控制在增益因子转换单元703中获取的子带的功率增益，并且计算公式4中示出的受控功率增益。

受控功率增益在SAC解码器203中通过公式19的矢量被应用到输入音频信号L0和R0，从而根据有关输入音频信号的渲染的控制信息(即交互作用控制信号)执行渲染。

同时，当SAC解码器203处于MPEG环绕立体声模式并且它使用ICC作为空间线索时，空间线索渲染器201通过如下列公式25所示的线性内插处理来校正ICC参数。

ICC_Ls，Lf＝(1-η)ICC_Ls，Lf+ηICC_Rs，Rf

ICC_Rs，Rf＝(1-η)ICC_Rs，Rf+ηICC_Ls，Lf

$\mathrm{\η}=\frac{{\mathrm{\θ}}_{\mathrm{pan}}}{\mathrm{\π}},$ θ_pan≤π

$\mathrm{\η}=1-\frac{{\mathrm{\θ}}_{\mathrm{pan}}-\mathrm{\π}}{\mathrm{\π}},$ θ_pan＞π                                公式25

其中θ_pan表示作为有关输入音频信号的渲染的控制信息(即交互作用控制信号)输入的角度信息。

简言之，根据旋转角度(θ_pan)来线性地内插左ICC值和右ICC值。

同时，传统SAC解码器接收空间线索，例如CLD，将其转换为功率增益，并且基于该功率增益来解码输入音频信号。

这里，在本发明的实施例中，输入到传统的SAC解码器的CLD对应于CLD转换单元407的转换后的信号值(CLD_m ⁱ)。在本发明的实施例中，由传统的SAC解码器控制的功率增益对应于增益因子控制单元405的功率增益(_outG_m)。

根据本发明的另一个实施例，SAC解码器203可以使用在增益因子控制单元405中获取的功率增益(_outG_m)作为空间线索，而不是使用在CLD转换单元407中获取的转换后的信号值(CLD_m ⁱ)。由此，可以省略在SAC解码器203中将空间线索(即CLD_m ⁱ)转换为功率增益(_outG_m)的处理。在这种情况下，由于SAC解码器203不需要在CLD转换单元407中获取的转换后的信号值(CLD_m ⁱ)，因此空间线索渲染器201可能被设计为不包括CLD转换单元407。

同时，本发明的附图中图解说明的块的功能可被集成到一个单元中。例如，空间线索渲染器201可被形成为包含在SAC解码器203中。构成部件间的这种集成属于本发明的范畴和范围之内。尽管所述块在附图中被单独地图解说明，但是这意味着每个块应被形成为单独的单元。

图8和图9展示了可应用图2的音频信号渲染控制器的本发明的实施例。图8图解说明了用于解码多目标或多声道音频信号的空间解码器。图9图解说明了作为空间解码器的三维(3D)立体声音频信号解码器。

图8和图9的SAC解码器803和903可以采用使用空间线索的音频解码方法，例如MPEG环绕、双声道线索编码(BCC)、和声源位置线索编码(SSLCC)。图8和图9的平移工具801和901对应于图2的空间线索渲染器201。

图10是示出可应用到图8和图9的空间线索渲染器201的示例的视图。

图10对应于图4的空间线索渲染器。图10中所示的空间线索渲染器被设计来处理其他空间线索，例如CPC和ICC，并且图4的空间线索渲染器仅处理CLD。这里，为了简洁而省略分析单元和CLD转换单元，并且有关输入音频信号的渲染的控制信息(即交互作用控制信号)以及增益因子控制单元被分别展示为控制参数和增益平移单元。增益因子控制单元的输出(σ_XX ²)表明受控功率增益，并且它可被输入到空间线索渲染器201。如上所述，本发明可以基于输入到解码器的空间线索(即CLD)来控制输入音频信号的渲染。图10中示出了本发明的实施例。

根据图10中图解说明的空间线索渲染器的实施例，可以消除多目标或多声道音频信号的电平(被称作抑制)。例如，当CLD是有关第m子带中的第j输入音频信号和第k输入音频信号的功率电平比的信息时，基于公式2来计算第j输入音频信号的功率增益(g_m ^j)和第k输入音频信号的功率增益(g_m ^k)。

这里，当第k输入音频信号的功率电平将被消除时，仅第k输入音频信号的功率增益(g_m ^k)元素被调节为0。

返回到图8和图9，根据本发明的实施例，基于输入到平移渲染工具805和905并且由平移工具801和901在空间线索域中控制的受控输入音频信号的渲染信息，根据平移方法来渲染多目标或多声道音频信号。这里，由于输入到平移渲染工具805和905的输入音频信号在频域(复数域)中被处理，因此也可以基于子带来执行渲染。

在HRTF渲染工具807和907中，可以按HRTF方法来渲染从平移渲染工具805和905输出的信号。HRTF渲染是一种将HRTF滤波器应用于每个目标或每个声道的方法。

使用平移渲染工具805和905的平移方法以及HRTF渲染工具807和907的HRTF方法，可以可选地执行渲染处理。也就是，平移渲染工具805和905以及HRTF渲染工具807和907是选项。然而，当选择了所有的平移渲染工具805和905以及HRTF渲染工具807和907时，在HRTF渲染工具807和907之前进行平移渲染工具805和905。

如上所述，平移渲染工具805和905以及HRTF渲染工具807和907可以不使用在平移工具801和901的CLD转换单元407中获取的转换后的信号(CLD_m ⁱ)，而是使用在增益因子控制单元405中获取的功率增益(_outG_m)。在这种情况下，HRTF渲染工具807和907可以通过使用每个目标或每个声道的输入音频信号的功率电平来调节HRTF系数。这里，平移工具801和901可被设计成不包含CLD转换单元407。

缩混器809执行缩混，从而输出音频信号的数目小于解码的多目标或多声道音频信号的数目。

反向T/F 811通过执行反向T/F变换，将频域的所渲染的多目标或多声道音频信号变换为时域的所渲染的多目标或多声道音频信号。

图9中所示的基于空间线索的解码器(例如3D立体声音频信号解码器)也包括平移渲染工具905和HRTF渲染工具907。HRTF渲染工具907遵循MPEG环绕的双声道解码方法，以便输出立体声信号。简言之，应用了基于参数的HRTF滤波。

由于平移渲染工具805和905以及HRTF渲染工具807和907众所周知，因此这里将不提供对其的详细描述。

双声道解码方法是一种接收输入音频信号并且输出作为3D立体声信号的双声道立体声信号的方法。通常，使用HRTF滤波。

本发明可应用于其中通过SAC多声道解码器播放作为3D立体声信号的双声道立体声信号的情况。通常，对应于5.1声道的双声道立体声信号基于下列公式26来创建。

x_{Binaural_L}(t)＝x_Lf(t)*h_-30，L(t)+x_{Rf_L}(t)*h_30，L(t)+x_{Ls_L}(t)*h_-110，L(t)+x_{Rs_L}(t)*h_110，L(t)+x_{C_L}(t)*h_0，L(t)

x_{Binaural_R}(t)＝x_Lf(t)*h_-30，R(t)+x_{Rf_L}(t)*h_30，R(t)+x_{Ls_L}(t)*h_-110，R(t)+x_{Rs_L}(t)*h_110，R(t)+x_{C_L}(t)*h_0，R(t)

                                                                                                   公式26

其中x表示输入音频信号；h表示HRTF函数；以及x_Binaural表示输出音频信号，其是双声道立体声信号(3D立体声信号)。

综上所述，HRTF函数对于每个输入音频信号进行复积分，从而输入音频信号被缩混，并且产生双声道立体声信号。

根据传统的方法，应用于每个输入音频信号的HRTF函数应被转换为控制位置的函数，并且随后被用来根据有关输入音频信号的渲染的控制信息(即交互作用控制信号)对双声道立体声信号执行渲染。例如，当对于Lf的虚拟位置的有关输入音频信号的渲染的控制信息(例如交互作用控制信号)是40°时，公式26变换为下列公式27。

x_{Binaural_L}(t)＝x_Lf(t)*h_40，L(t)+x_{Rf_L}(t)*h_30，L(t)+x_{Ls_L}(t)*h_-110，L(t)+x_{Rs_L}(t)*h_110，L(t)+x_{C_L}(t)*h_0，L(t)

x_{Binaural_R}(t)＝x_Lf(t)*h_40，R(t)+x_{Rf_L}(t)*h_30，R(t)+x_{Ls_L}(t)*h_-110，R(t)+x_{Rs_L}(t)*h_110，R(t)+x_{C_L}(t)*h_0，R(t)

                                                                                                       公式27

然而，根据本发明的实施例，通过基于有关输入音频信号的渲染的控制信息(例如交互作用控制信号)调节空间线索参数，对于输出音频信号来控制声音场景，而不是在控制双声道立体声信号的渲染的过程中控制不同于公式27的HRTF函数。然后，通过仅应用公式26的预定HRTF函数来渲染双声道信号。

当空间线索渲染器201基于空间线索域中的受控空间线索来控制双声道信号的渲染时，总是应用公式26，而不控制诸如公式27的HRTF函数。

毕竟，输出音频信号的渲染是在空间线索渲染器201中根据有关输入音频信号的渲染的控制信息(例如，交互作用控制信号)在空间线索域中控制的。可以不加变化地应用HRTF函数。

根据本发明的实施例，用有限数目的HRTF函数来控制双声道立体声信号的渲染。根据传统的双声道解码方法，需要尽可能多的HRTF函数，以便控制双声道立体声信号的渲染。

图11是图解说明采用双声道立体声解码的运动图像专家组(MPEG)环绕解码器的视图。它示出了概念上与图9相同的结构。这里，空间线索渲染块是空间线索渲染器201，并且它输出受控功率增益。其它组成部件概念上也与图9的那些组成部件相同，并且它们示出了采用双声道立体声解码的MPEG环绕解码器的结构。空间线索渲染块的输出被用来控制MPEG环绕解码器的参数转换块中的HRTF函数的频率响应特性。

图12到14展示了本发明的另一个实施例。图12是描绘根据本发明另一个实施例的音频信号渲染控制器的视图。根据本发明的实施例，通过调节空间线索来有效地控制多声道音频信号，并且这可被有用地应用于交互式的3D音频/视频服务。

如附图所示，本发明的该实施例中建议的音频信号渲染控制器包括SAC解码器1205，其对应于图1的SAC编码器102，并且它还包括侧信息(SI)解码器1201和声场定位器1203。

侧信息解码器1201和声场定位器1203对应于图2的空间线索渲染器201。具体地，侧信息解码器1201对应于图4的CLD分析单元401。

侧信息解码器1201接收空间线索(例如CLD)，并且基于公式1提取CLD参数。所提取的CLD参数被输入到声场定位器1203。

图13是图解说明图12的声场定位器的详细方框图。如图所示，声场定位器1203包括虚拟位置估计单元1301和CLD转换单元1303。

虚拟位置估计单元1301和CLD转换单元1303功能上对应于图4的增益因子转换单元403、增益因子控制单元405、和CLD转换单元407。

虚拟位置估计单元1301基于输入的CLD参数来计算每个音频信号的功率增益。功率增益能够以根据CLD计算方法的不同方法来计算。例如，当基于基准音频信号计算输入音频信号的所有CLD时，每个输入音频信号的功率增益可以如下列公式28计算。

$G_{i,b}=\frac{1}{\sqrt{1+\underset{i=1}{\overset{C-1}{\mathrm{\Σ}}}}{10}^{{\mathrm{CLD}}_{i,b}/10}}$

$G_{i+1,b}={10}^{{\mathrm{CLD}}_{i+1,b}/10}{G}_{i,b}$ 公式28

其中C表示整个音频信号的数目；

i表示音频信号索引(1≤i≤C-1)；

b表示子带索引；和

G_i，b表示输入音频信号的功率增益(包括左前声道信号Lf、左后声道信号Ls、右前声道信号Rf、右后声道信号Rs和中央信号C)。

通常，每帧子带的数目在20和40之间。当对于每个子带计算每个音频信号的功率增益时，虚拟位置估计单元1301根据功率增益估计虚拟声源的位置。

例如，当输入音频信号是5个声道的信号时，空间矢量(其是虚拟声源的位置)可以如下列公式29计算。

Gv_b＝A₁×G_1，b+A₂×G_2，b+A₃×G_3，b+A₄×G_4，b+A₅×G_5，b

LHv_b＝A₁×G_1，b+A₂×G_2，b+A₄×G_4，b

RHv_b＝A₁×G_1，b+A₃×G_3，b+A₅×G_5，b

Lsv_b＝A₁×G_1，b+A₂×G_2，b

Rsv_b＝A₁×G_1，b+A₃×G_3，b             公式29

其中i表示音频信号索引；b表示子带索引；

A_i表示输出音频信号的位置，其是复平面中表示的坐标；

Gv_b表示考虑5个输入音频信号Lf、Ls、Rf、Rs和C的全方向矢量；

LHv_b表示考虑左半平面上的音频信号Lf、Ls和C的左半平面矢量；

RHv_b表示考虑右半平面上的音频信号Rf、Rs和C的右半平面矢量；

Lsv_b表示仅考虑两个输入音频信号Lf和C的左前矢量；和

Rsv_b表示仅考虑两个输入音频信号Rf和C的右前矢量。

这里，Gv_b被控制来控制虚拟声源的位置。当要使用两个矢量来控制虚拟声源的位置时，采用LHv_b和RHv_b。虚拟声源的位置将要使用用于两对输入音频信号的矢量(即，左前矢量和右前矢量)来控制，例如可以使用矢量Lsv_b和Rsv_b。当对于两对输入音频信号获取并采用矢量时，可存在与输入音频信号的数目一样多的音频信号对。

基于下列公式30来计算有关每个矢量的角度(即，虚拟声源的平移角度)的信息。

${\mathrm{Ga}}_b=\∠\left({\mathrm{Gv}}_b\right)=\arctan \frac{\mathrm{Im}\left({\mathrm{Gv}}_b\right)}{\mathrm{Re}\left({\mathrm{Gv}}_b\right)}$ 公式30

类似地，可以与公式20类似地获取剩余矢量的角度信息(LHa_b，RHa_b，Lsa_b和Rsa_b)。

可以在期望的音频信号中自由地估计虚拟声源的平移角度，并且公式29和30只是不同的计算方法的一部分。因此，本发明不限于公式29和30的使用。

基于下列公式31计算缩混信号的第b子带的功率增益(M_downmix，b)。

$M_{\mathrm{downmix},b}=\sqrt{\underset{n=B_b}{\overset{B_{b+1}-1}{\mathrm{\Σ}}}\left|S_{\mathrm{downmix}}\left(n\right)\right|}$ 公式31

其中b表示子带的索引；

B_b表示子带的边界；

S表示缩混信号；和

N表示频率系数的索引。

声场定位器1203是能够灵活地控制多声道中生成的虚拟声源的位置的组成部件。如上所述，虚拟位置估计单元1301基于CLD参数估计虚拟声源的位置矢量。CLD转换单元1303接收在虚拟位置估计单元1301中估计的虚拟声源的位置矢量和虚拟声源的增量(delta amount：Δδ)作为渲染信息，并且基于下列公式32计算受控虚拟声源的位置矢量。

Ga_b＝Ga_b+△δ

LHa_b＝LHa_b+△δ

RHa_b＝RHa_b+△δ

Rsa_b＝Rsa_b+△δ

Lsa_b＝Lsa_b+△δ          公式32

CLD转换单元1303通过向基于公式32计算出的受控虚拟声源的位置矢量(Ga_b，LHa_b，RHa_b，Rsa_b，和Lsa_b)相反地应用公式29和31，来计算音频信号的受控功率增益。例如，公式32中的Ga_b的公式被应用来以仅一个角度进行控制，并且公式32中的LHa_b和RHa_b的公式被应用来以两个左半平面矢量和右半平面矢量的角度进行控制。公式32中的Rsa_b和Lsa_b的公式被应用来以两对输入音频信号(包括左前音频信号和右前音频信号)的矢量角度进行控制。公式29中的Lsv_b和Rsv_b的公式以及公式32中的Rsa_b和Lsa_b的公式被类似地应用来以诸如Ls和Lf或者Rs和Rf的其他输入音频信号对的矢量角度进行控制。

而且，CLD转换单元1303将受控功率增益转换为CLD值。

获取的CLD值被输入到SAC解码器1205。本发明的实施例可应用于普通多声道音频信号。图14是描绘应用于本发明的实施例的多声道音频解码器的视图。参考该附图，它进一步包括侧信息解码器1201和声场定位器1203。

在变换器1403(例如离散傅立叶变换(DFT)单元或者正交镜滤波器组变换(QMFT))中，时域的多声道信号被转换为频域的信号。

侧信息解码器1201从在变换器1403中获取的转换信号中提取空间线索(例如CLD)，并且将该空间线索传送到声场定位器1203。声场定位器1203向功率增益控制器1405传送表示基于受控虚拟声源的位置矢量计算的受控功率增益的CLD，该CLD是基于公式32获取的CLD。功率增益控制器1405基于接收到的CLD控制频域中每个子带的每个音频声道的功率。所述控制如下列公式33所示。

${S^{\′}}_{\mathrm{ch},n}=S_{\mathrm{ch},n}\×G_{i,b}^{\mathrm{mod}\mathrm{ifiedCLD}},$ B_n≤n≤B_n+1-1

其中S_ch，n表示第ch声道的第n频率系数；

S′_ch，n表示功率增益控制单元1105中变形的频率系数；

B_n表示第b子带的边界信息；和

G_i，b ^modifiedCLD表示从CLD值计算的增益系数，其是声场定位器1203的输出信号，即反映公式32的CLD值。

根据本发明的实施例，通过向多声道信号的生成反映空间线索的增量，可以控制音频信号的虚拟声源的位置。

尽管在装置方面已进行了上面的描述，但是对于本发明所属领域的普通技术人员明显的是，也可以在方法方面实现本发明。

上述的本发明的方法可被实现为程序并被存储在计算机可读记录介质中，例如CD-ROM、RAM、ROM、软盘、硬盘和磁光盘。

尽管已经参考某些优选实施例描述了本发明，但是对于本领域的普通技术人员来说明显的是，可以进行各种变化和修改，而不背离由所附权利要求限定的本发明的范畴。

工业实用性

本发明应用于多目标或多声道音频信号的解码。

Claims (60)

1.一种用于控制音频信号的渲染的装置，包括：

解码部件，用于使用空间音频编码(SAC)解码方法来解码输入音频信号，所述输入音频信号是以SAC方法编码的缩混信号；和

空间线索渲染部件，用于接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息，

其中该解码部件基于由空间线索渲染部件控制的受控空间线索信息，对输入音频信号执行渲染。

2.如权利要求1所述的装置，其中所述空间线索信息是指明输入音频信号之间的电平差的声道电平差(CLD)，并且该空间线索信息表达为公式1，和

该空间线索渲染部件包括：

CLD分析单元，用于从自编码部件传送的CLD中提取CLD参数；

增益因子转换单元，用于从在CLD分析单元中提取的CLD参数中提取每个音频信号的功率增益；和

增益因子控制单元，用于通过基于有关输入音频信号的渲染的控制信息控制在增益因子转换单元中提取的每个音频信号的功率增益，来计算受控功率增益，公式1表达为：

${\mathrm{CLD}}_m^i=10{\log }_{10}\frac{P_m^k}{P_m^j}$ 公式1

其中i表示CLD的索引(1≤i≤N-1)；

N表示第m子带中输入音频信号的数目；和

P_m ^k表示第m子带中第k输入音频信号的子带功率。

3.如权利要求2所述的装置，其中该增益因子转换单元提取输入音频信号的功率增益(G_m)，该功率增益表达为公式2：

$G_m=\left[\begin{array}{c}{g}_m^1\\ g_m^2\\ ...\\ g_m^k\\ ...\\ g_m^N\end{array}\right]$

$g_m^j=\frac{1}{\sqrt{1+{10}^{{\mathrm{CLD}}_m^i/10}}}=\frac{\sqrt{P_m^j}}{\sqrt{P_m^k+P_m^j}}$

$g_m^k=g_m^j\·{10}^{{\mathrm{CLD}}_m^i/20}=\frac{\sqrt{P_m^j}}{\sqrt{P_m^k+P_m^j}}$ 公式2

其中m表示子带的索引；

g_m ^k表示第m子带中第k输入音频信号(1≤k≤N)的子带功率增益；和

G_m表示第m子带中所有输入音频信号的功率增益。

4.如权利要求3所述的装置，其中该增益因子控制单元通过根据平移定律基于有关输入音频信号的渲染的控制信息控制在该增益因子转换单元中提取的输入音频信号的功率增益(G_m)，来计算如公式3表达的受控功率增益(_outG_m)，公式3表达为：

$G_m^{\mathrm{out}}=\left[\begin{array}{c}g_m^1{}_{\mathrm{out}}\\ g_m^2{}_{\mathrm{out}}\\ .\\ .\\ .\\ g_m^M{}_{\mathrm{out}}\end{array}\right]={[\mathrm{\α},\mathrm{\β}]}_{M\×N}{G}_m$ 公式3

其中M表示输出音频信号的数目；N表示输入音频信号的数目；和

[α，β]_M×N表示由系数α_k和β_k组成的M×N矢量，所述系数α_k和β_k被计算来将输入音频信号(g_m ^k)映射到任意输出音频信号之间的位置。

5.如权利要求4所述的装置，其中所述平移定律是恒定功率平移(CPP)定律，并且所述系数α_k和β_k分别是α_k＝cos(θ_k)，β_k＝sin(θ_k)，

其中θ_k是输入音频信号(g_m ^k)所映射的输出音频信号之间的角度信息。

6.如权利要求2所述的装置，其中所述空间线索渲染部件还包括：

CLD转换单元，用于将从所述增益因子控制单元输出的受控功率增益转换为CLD值，和

所述解码部件使用从所述CLD转换单元中的转换获得的CLD值作为受控空间信息，该受控空间信息是执行输入音频信号的渲染所需要的。

7.如权利要求6所述的装置，其中该CLD转换单元基于如下表达的公式4将受控功率增益转换为CLD值：

转换后的 ${\mathrm{CLD}}_m^i=20{\log }_{10}\frac{g_m^k{}_{\mathrm{out}}}{g_m^j{}_{\mathrm{out}}}$ 公式4

其中转换后的CLD_m ⁱ是从该CLD转换单元中的转换获得的CLD值；

i表示CLD索引(1≤i≤M-1)；

M表示第m子带中的音频信号的数目；

_outg_m ^k和_outg_m ^j分别表示第m子带中的第j音频信号和第k音频信号的受控功率增益。

8.如权利要求1所述的装置，其中该解码部件根据应用了HRTF系数的双声道解码方法而输出双声道立体声信号。

9.一种用于控制音频信号的渲染的装置，包括：

解码部件，用于使用空间音频编码(SAC)方法来解码输入音频信号，所述输入音频信号是以SAC方法编码的缩混信号；和

空间线索渲染部件，用于接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息，

其中该解码部件基于由空间线索渲染部件控制的空间线索信息，执行输入音频信号的渲染，和

所述空间线索信息是表示输入音频信号之间的电平差并表达为D_CLD ^Q(ott，l，m)的声道电平差(CLD)值，并且

该空间线索渲染部件包括：

CLD分析单元，用于从自编码部件传送的CLD中提取CLD参数；

增益因子转换单元，用于从自CLD分析单元中提取的CLD参数中提取每个音频信号的功率增益；和

增益因子控制单元，用于通过基于有关输入音频信号的渲染的控制信息控制在增益因子转换单元中提取的每个音频信号的功率增益，来计算受控功率增益，

m表示子带的索引，而l表示D_CLD ^Q(ott，l，m)中的参数组的索引。

10.如权利要求9所述的装置，其中该增益因子转换单元提取输入音频信号的功率增益(G_m)，该功率增益表达为公式5：

$G_m=\left[\begin{array}{c}p{G}_{l,m}^{\mathrm{Lf}}\\ p{G}_{l,m}^{\mathrm{Ls}}\\ p{G}_{l,m}^{\mathrm{Rf}}\\ p{G}_{l,m}^{\mathrm{Rs}}\\ p{G}_{l,m}^C\\ p{G}_{l,m}^{\mathrm{lfe}}\end{array}\right]$

$p{G}_{l,m}^{\mathrm{Lf}}=G_{1,l,m}^L\·G_{3,l,m}^{\mathrm{Lf}}$

$p{G}_{l,m}^{\mathrm{Ls}}=G_{1,l,m}^L\·G_{3,l,m}^{\mathrm{Ls}}$

$p{G}_{l,m}^{\mathrm{Rf}}=G_{1,l,m}^R\·G_{4,l,m}^{\mathrm{Rf}}$

$p{G}_{l,m}^{\mathrm{Rs}}=G_{1,l,m}^R\·G_{4,l,m}^{\mathrm{Rs}}$

$p{G}_{l,m}^C=G_{1,l,m}^{\mathrm{Clfe}},$ $p{G}_{l,m}^{\mathrm{lfe}}=0$ (m＞1)

$p{G}_{l,m}^{\mathrm{lfe}}=G_{1,l,m}^{\mathrm{Clfe}}\·G_{2,l,m}^{\mathrm{lfe}},$ $p{G}_{l,m}^C=G_{1,l,m}^{\mathrm{Clfe}}\·G_{2,l,m}^C$ (m＝0，1)

$G_{0,l,m}^{\mathrm{Clfe}}=\frac{1}{\sqrt{1+{10}^{D_{\mathrm{CLD}}^Q(0,l,m)/10}}}$

$G_{0,l,m}^{\mathrm{LR}}=G_{0,l,m}^{\mathrm{Clfe}}\·{10}^{D_{\mathrm{CLD}}^Q(0,l,m)/20}$ 公式5

其中G_m的系数是表示第m子带的功率增益的矢量；和

G_m是表示第m子带中的所有输入音频信号的功率增益的矢量。

11.如权利要求10所述的装置，其中该增益因子控制单元通过根据平移定律基于有关输入音频信号的渲染的控制信息控制在该增益因子转换单元中提取的输入音频信号的功率增益(G_m)，来计算如公式6表达的受控功率增益(_outG_m)，公式6表达为：

$G_m^{\mathrm{out}}=\left[\begin{array}{c}g_m^1{}_{\mathrm{out}}\\ g_m^2{}_{\mathrm{out}}\\ .\\ .\\ .\\ g_m^M{}_{\mathrm{out}}\end{array}\right]={[\mathrm{\α},\mathrm{\β}]}_{M\×N}{G}_m$ 公式6

其中M表示输出音频信号的数目；N表示输入音频信号的数目；和

[α，β]_M×N表示由系数α_k和β_k组成的M×N矢量，所述系数α_k和β_k被计算来将输入音频信号(pG_l，m ^k)映射到任意输出音频信号之间的位置。

12.如权利要求11所述的装置，其中所述平移定律是恒定功率平移(CPP)定律，并且所述系数α_k和β_k表达为公式7：

α_k＝cos(θ_m)，β_k＝sin(θ_m)

公式7

其中θ_pan，k表示输入音频信号(pG_l，m ^k)所映射到的输出音频信号之间的角度信息；

张角表示输出音频信号之间的角度信息；和

θ_ref表示输出音频信号之间的基准输出音频信号的角度信息。

13.如权利要求9所述的装置，其中所述空间线索渲染部件还包括：

CLD转换单元，用于将从所述增益因子控制单元输出的受控功率增益转换为CLD值，和

所述解码部件使用从所述CLD转换单元中的转换获得的CLD值作为受控空间信息，该受控空间信息是执行输入音频信号的渲染所需要的。

14.如权利要求13所述的装置，其中CLD转换单元基于如下表达的公式8将受控功率增益转换为CLD值：

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(0,l,m)=20{\log }_{10}\left(\frac{p{G}_{\mathrm{Lf}}(l,m)}{p{G}_{\mathrm{Ls}}(l,m)}\right)$

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(1,l,m)=20{\log }_{10}\left(\frac{p{G}_{\mathrm{Rf}}(l,m)}{p{G}_{\mathrm{Rs}}(l,m)}\right)$

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(2,l,m)=10{\log }_{10}\left(\frac{p{G}_{\mathrm{Lf}}^2(l,m)+p{G}_{\mathrm{Ls}}^2(l,m)}{p{G}_{\mathrm{Rf}}^2(l,m)+p{G}_{\mathrm{Rs}}^2(l,m)}\right)$

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(3,l,m)=20{\log }_{10}\left(\frac{p{G}_C(l,m)}{p{G}_{\mathrm{lfe}}(l,m)}\right)$

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(4,l,m)=10{\log }_{10}\left(\frac{p{G}_{\mathrm{Lf}}^2(l,m)+p{G}_{\mathrm{Ls}}^2(l,m)+p{G}_{\mathrm{Rf}}^2(l,m)+p{G}_{\mathrm{Rs}}^2(l,m)}{p{G}_C^2(l,m)+p{G}_{\mathrm{lfe}}^2(l,m)}\right)$

公式8。

15.如权利要求9所述的装置，其中该解码部件根据应用了HRTF系数的双声道解码方法而输出双声道立体声信号。

16.一种用于控制音频信号的渲染的装置，包括：

解码部件，用于使用空间音频编码(SAC)方法来解码输入音频信号，所述输入音频信号是以SAC方法编码的缩混信号；和

空间线索渲染部件，用于接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息，

其中该解码部件基于由空间线索渲染部件控制的空间线索信息，来执行输入音频信号的渲染，和

基于公式9从缩混的信号L0和R0中提取中央信号(C)、左半平面信号(Lf+Ls)和右半平面信号(Rf+Rs)，和

所述空间线索信息是表示输入音频信号之间的电平差并表达为CLD_LR/Clfe，CLD_L/R，CLD_C/lfe，CLD_Lf/Ls和CLD_Rf/Rs的声道电平差(CLD)值，并且

该空间线索渲染部件包括：

CLD分析单元，用于从自编码部件传送的CLD中提取CLD参数；

增益因子转换单元，用于从自CLD分析单元中提取的CLD参数中提取每个音频信号的功率增益；和

增益因子控制单元，用于通过基于有关输入音频信号的渲染的控制信息控制在增益因子转换单元中提取的每个音频信号的功率增益，来计算受控功率增益，

公式9表达为：

$R_1^{\′l,m}=\left[\begin{array}{cc}{w}_{11}^{l,m}& w_{12}^{\′l,m}\\ w_{21}^{\′l,m}& w_{22}^{l,m}\\ w_{31}^{l,m}\sqrt{2}& w_{32}^{l,m}\sqrt{2}\\ w_{11}^{l,m}& w_{12}^{l,m}\\ w_{21}^{\′l,m}& w_{22}^{l,m}\end{array}\right],$ 0≤m＜m_tttLowProc(0)，0≤l＜L

$w_{12}^{\′l,m}=\frac{P_{\mathrm{pan}}^L}{\sqrt{P_C/2+P_{\mathrm{Rf}}+P_{\mathrm{Rs}}}}$

$w_{21}^{\′l,m}=\frac{P_{\mathrm{pan}}^R}{\sqrt{P_C/2+P_{\mathrm{Lf}}+P_{\mathrm{Ls}}}}$

$w_{13}^{\′l,m}=\frac{P_{\mathrm{pan}}^{\mathrm{CL}}}{\sqrt{\mathrm{Pc}/2+P_{\mathrm{Rf}}+P_{\mathrm{Rs}}}}$

$w_{31}^{\′l,m}=\frac{P_{\mathrm{pan}}^{\mathrm{CR}}}{\sqrt{P_C/2+P_{\mathrm{Lf}}+P_{\mathrm{Ls}}}}$

${\left(w_{11}^{\′l,m}\right)}^2+{\left(w_{21}^{\′l,m}\right)}^2+{\left(w_{31}^{\′l,m}\right)}^2=1$

${\left(w_{12}^{\′l,m}\right)}^2+{\left(w_{22}^{\′l,m}\right)}^2+{\left(w_{32}^{\′l,m}\right)}^2=1$ 公式9

其中 w_ij ^l，m是从基于CLD值(CLD_LR/Clfe，CLD_L/R，CLD_C/lfe，CLD_Lf/Ls和CLD_Rf/Rs)计算的功率增益中生成的系数(i和j是矢量矩阵的索引；m是子带的索引；以及1是参数组的索引)；

m_tttLowProc是子带的数目；

P_C，P_Lf，P_Ls，P_Rf，P_Rs是中央信号、左前信号、左后信号、右前信号和右后信号的功率增益；

P_pan ^L表示基于平移定律的投影功率，与P_C，P_Lf，P_Ls的组合成比例；

P_pan ^R表示基于平移定律的投影功率，与P_C，P_Rf，P_Rs的组合成比例；和

P_pan ^CL和P_pan ^CR分别是相对于中央声道的左半平面和右半平面的平移功率增益。

17.如权利要求16所述的装置，其中该增益因子转换单元基于CLD值(CLD_LR/Clfe，CLD_L/R，CLD_C/lfe，CLD_Lf/Ls和CLD_Rf/Rs)提取输入音频信号的功率增益(P_C，P_Lf，P_Ls，P_Rf，P_Rs)。

18.如权利要求17所述的装置，其中该增益因子控制单元通过基于有关输入音频信号的渲染的控制信息控制在该增益因子转换单元中提取的输入音频信号的功率增益(P_C，P_Lf，P_Ls，P_Rf，P_Rs)，而附加地计算功率增益(P_pan ^L，P_pan ^R，P_pan ^CL和P_pan ^CR)，和

受控功率增益是基于获得的功率增益(P_C，P_Lf，P_Ls，P_Rf，P_Rs，P_pan ^L，P_pan ^R，P_pan ^CL和P_pan ^CR)来计算的。

19.如权利要求18所述的装置，其中所述受控功率增益是基于如下表达的公式10来计算的：

$g_m^{\mathrm{Lf}}{}_{\mathrm{out}}=\sqrt{P_{\mathrm{Lf}}+P_{\mathrm{pan}}^L}$

$g_m^{\mathrm{Ls}}{}_{\mathrm{out}}=\sqrt{P_{\mathrm{Ls}}}$

$g_m^{\mathrm{Rf}}{}_{\mathrm{out}}=\sqrt{P_{\mathrm{Rf}}+P_{\mathrm{pan}}^R}$

$g_m^{\mathrm{Rs}}{}_{\mathrm{out}}=\sqrt{P_{\mathrm{Rs}}}$

$g_m^{\mathrm{CL}}{}_{\mathrm{out}}=\sqrt{P_C/2}$

$g_m^{\mathrm{CR}}{}_{\mathrm{out}}=\sqrt{P_C/2}$ 公式10。

20.如权利要求16所述的装置，其中该解码部件根据应用了HRTF系数的双声道解码方法而输出双声道立体声信号。

21.一种用于控制音频信号的渲染的装置，包括：

解码部件，用于使用空间音频编码(SAC)方法来解码输入音频信号，所述输入音频信号是以SAC方法编码的缩混信号；和

空间线索渲染部件，用于接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息，

其中该解码部件基于由空间线索渲染部件控制的空间线索信息，来执行输入音频信号的渲染，和

所述空间线索信息是表示输入音频信号的缩混率的声道预测系数(CPC)和表示输入音频信号之间的电平差的声道电平差(CLD)值，并且

该空间线索渲染部件包括：

CPC/CLD分析单元，用于从自编码部件传送的CPC和CLD中提取CPC参数和CLD参数；

增益因子转换单元，用于通过从在CPC/CLD分析单元中提取的CPC参数中提取中央信号、左半平面信号和右半平面信号并且从CLD参数中提取左信号分量和右信号分量的功率增益，而提取每个信号的功率增益；和

增益因子控制单元，用于通过基于有关输入音频信号的渲染的控制信息控制在增益因子转换单元中提取的每个音频信号的功率增益，来计算受控功率增益。

22.如权利要求21所述的装置，其中该增益因子转换单元基于如下表达的公式11从在CPC/CLD分析单元中提取的CPC参数中提取中央信号、左半平面信号和右半平面信号：

$M_{\mathrm{PDC}}\left[\begin{array}{c}{l}_0\\ r_0\end{array}\right]=\left[\begin{array}{c}l\\ r\\ c\end{array}\right]$

$M_{\mathrm{PDC}}=\left[\begin{array}{cc}{c}_{11}& c_{12}\\ c_{21}& c_{22}\\ c_{31}& c_{32}\end{array}\right]$ 公式11

其中l₀，r₀，l，r，c表示输入音频信号L0和R0、左半平面信号(Ls+Lf)、右半平面信号(Rf+Rs)以及中央信号(C)；而M_PDC表示在CPC/CLD分析单元中提取的CPC参数矢量。

23.如权利要求22所述的装置，其中在CPC/CLD分析单元中提取的CLD参数是左信号分量之间的电平差信息和右信号分量之间的电平差信息，和

该增益因子转换单元基于CLD参数，从所提取的中央信号、左半平面信号和右半平面信号中计算左信号分量(Ls，Lf)的功率增益和右信号分量(Rf，Rs)的功率增益。

24.如权利要求23所述的装置，其中该增益因子控制单元通过根据平移定律基于有关输入音频信号的渲染的控制信息控制在该增益因子转换单元中提取的输入音频信号的功率增益，来计算如公式12表达的受控功率增益(_outG_m)，公式12表达为：

$G_m^{\mathrm{out}}=\left[\begin{array}{c}g_m^1{}_{\mathrm{out}}\\ g_m^2{}_{\mathrm{out}}\\ .\\ .\\ .\\ g_m^M{}_{\mathrm{out}}\end{array}\right]={[\mathrm{\α},\mathrm{\β}]}_{M\×N}{G}_m$ 公式12

其中G_m表示输入音频信号的功率增益矢量；

_outG_m表示受控功率增益矢量；

M表示输出音频信号的数目；

N表示输入音频信号的数目；和

[α，β]_M×N表示由系数α_k和β_k组成的M×N矢量，所述系数α_k和β_k被计算来将输入音频信号(g_m ^k)映射到任意输出音频信号之间的位置。

25.如权利要求24所述的装置，其中所述平移定律是恒定功率平移(CPP)定律，并且所述系数α_k和β_k分别是α_k＝cos(θ_k)，β_k＝sin(θ_k)，

其中θ_k是输入音频信号(g_m ^k)所映射的输出音频信号之间的角度信息。

26.如权利要求21所述的装置，其中所述空间线索渲染部件还包括：

CLD转换单元，用于将从所述增益因子控制单元输出的受控功率增益转换为CLD值，和

所述解码部件使用从所述CLD转换单元中的转换获得的CLD值作为受控空间信息，该受控空间信息是执行输入音频信号的渲染所需要的。

27.如权利要求26所述的装置，其中该CLD转换单元基于如下表达的公式13将受控功率增益转换为CLD值：

转换后的 ${\mathrm{CLD}}_m^i=20{\log }_{10}\frac{g_m^k{}_{\mathrm{out}}}{g_m^j{}_{\mathrm{out}}}$ 公式13

其中转换后的CLD_m ⁱ是从CLD转换单元中的转换获得的CLD值；

i表示CLD索引(1≤i≤M-1)；

M表示第m子带中的音频信号的数目；

_outg_m ^k和_outg_m ^j分别表示第m子带中的第j音频信号和第k音频信号的受控功率增益。

28.如权利要求21所述的装置，其中该解码部件根据应用了HRTF系数的双声道解码方法而输出双声道立体声信号。

29.一种用于控制音频信号的渲染的装置，包括：

解码部件，用于使用空间音频编码(SAC)方法来解码输入音频信号，所述输入音频信号是以SAC方法编码的缩混信号；和

空间线索渲染部件，用于接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息，

其中该解码部件基于由空间线索渲染部件控制的空间线索信息，来执行输入音频信号的渲染，和

该空间线索信息是表示输入音频信号之间的相关性的声道间相关性(ICC)值，和

该空间线索渲染部件基于如下表达的公式14通过线性内插处理来控制ICC参数：

ICC_Ls，Lf＝(1-η)ICC_Ls，Lf+ηICC_Rs，Rf

ICC_Rs，Rf＝(1-η)ICC_Rs，Rf+ηICC_Ls，Lf

$\mathrm{\η}=\frac{{\mathrm{\θ}}_{\mathrm{pan}}}{\mathrm{\π}},$ θ_pan≤π

$\mathrm{\η}=1-\frac{{\mathrm{\θ}}_{\mathrm{pan}}-\mathrm{\π}}{\mathrm{\π}},$ θ_pan＞π                    公式14

其中θ_pan表示有关输入音频信号的渲染的控制信息。

30.如权利要求29所述的装置，其中该解码部件根据应用了HRTF系数的双声道解码方法而输出双声道立体声信号。

31.一种用于控制音频信号的渲染的方法，包括步骤：

a)使用空间音频编码(SAC)解码方法来解码输入音频信号，所述输入音频信号是以SAC方法编码的缩混信号；和

b)接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息，

其中基于在空间线索渲染步骤b)中控制的受控空间线索信息，在解码步骤a)中对输入音频信号执行渲染。

32.如权利要求31所述的方法，其中所述空间线索信息是指明输入音频信号之间的电平差的声道电平差(CLD)，并且该空间线索信息表示为公式15，并且

该空间线索渲染步骤b)包括步骤：

b1)从自编码部件传送的CLD中提取CLD参数；

b2)从在CLD分析步骤b1)中提取的CLD参数中提取每个音频信号的功率增益；和

b3)通过基于有关输入音频信号的渲染的控制信息控制在该增益因子转换步骤b2)中提取的每个音频信号的功率增益，来计算受控功率增益，

公式1表达为：

${\mathrm{CLD}}_m^i=10{\log }_{10}\frac{P_m^k}{P_m^j}$ 公式15

其中i表示CLD的索引(1≤i≤N-1)；

N表示第m子带中输入音频信号的数目；和

P_m ^k表示第m子带中第k输入音频信号的子带功率。

33.如权利要求32所述的方法，其中该增益因子转换步骤b2)提取输入音频信号的功率增益(G_m)，该功率增益表达为公式16：

$G_m=\left[\begin{array}{c}{g}_m^1\\ g_m^2\\ ...\\ g_m^k\\ ...\\ g_m^N\end{array}\right]$

$g_m^j=\frac{1}{\sqrt{1+{10}^{{\mathrm{CLD}}_m^i/10}}}=\frac{\sqrt{P_m^j}}{\sqrt{P_m^k+P_m^j}}$

$g_m^k=g_m^j\·{10}^{{\mathrm{CLD}}_m^i/20}=\frac{\sqrt{P_m^j}}{\sqrt{P_m^k+P_m^j}}$ 公式16

其中m表示子带的索引；

g_m ^k表示第m子带中第k输入音频信号(1≤k≤N)的子带功率增益；和

G_m表示第m子带中所有输入音频信号的功率增益。

34.如权利要求33所述的方法，其中该增益因子控制步骤b3)通过根据平移定律基于有关输入音频信号的渲染的控制信息控制在该增益因子转换步骤b2)中提取的输入音频信号的功率增益(G_m)，来计算如公式17表达的受控功率增益(_outG_m)，公式17表达为：

$G_m^{\mathrm{out}}=\left[\begin{array}{c}g_m^1{}_{\mathrm{out}}\\ g_m^2{}_{\mathrm{out}}\\ .\\ .\\ .\\ g_m^M{}_{\mathrm{out}}\end{array}\right]={[\mathrm{\α},\mathrm{\β}]}_{M\×N}{G}_m$ 公式17

其中M表示输出音频信号的数目；

N表示输入音频信号的数目；和

[α，β]_M×N表示由系数α_k和β_k组成的M×N矢量，所述系数α_k和β_k被计算来将输入音频信号(g_m ^k)映射到任意输出音频信号之间的位置。

35.如权利要求34所述的方法，其中所述平移定律是恒定功率平移(CPP)定律，并且所述系数α_k和β_k分别是α_k＝cos(θ_k)，β_k＝sin(θ_k)

其中θ_k是输入音频信号(g_m ^k)所映射的输出音频信号之间的角度信息。

36.如权利要求32所述的方法，其中所述空间线索渲染步骤b)还包括步骤：

b4)将从所述增益因子控制步骤b3)输出的受控功率增益转换为CLD值，和

所述解码步骤a)使用从在所述CLD转换步骤b4)中的转换获取的CLD值作为受控空间信息，该受控空间信息是执行输入音频信号的渲染所需要的。

37.如权利要求36所述的方法，其中在CLD转换步骤b4)中，基于如下表达的公式18将受控功率增益转换为CLD值：

转换后的 ${\mathrm{CLD}}_m^i=20{\log }_{10}\frac{g_m^k{}_{\mathrm{out}}}{g_m^j{}_{\mathrm{out}}}$ 公式18

其中转换后的CLD_m ⁱ是从在CLD转换步骤b4)中的转换获得的CLD值；

i表示CLD索引(1≤i≤M-1)；

M表示第m子带中的音频信号的数目；和

_outg_m ^k和_outg_m ^j分别表示第m子带中的第j音频信号和第k音频信号的受控功率增益。

38.如权利要求31所述的方法，其中在解码步骤a)中，根据应用了HRTF系数的双声道解码方法而输出双声道立体声信号。

39.一种用于控制音频信号的渲染的方法，包括步骤：

a)使用空间音频编码(SAC)方法来解码输入音频信号，所述输入音频信号是以SAC方法编码的缩混信号；和

b)接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息，

其中，在解码步骤a)中，基于在空间线索渲染步骤b)中控制的空间线索信息执行输入音频信号的渲染，和

所述空间线索信息是表示输入音频信号之间的电平差并表达为D_CLD ^Q(ott，l，m)的声道电平差(CLD)值，并且

该空间线索渲染步骤b)包括步骤：

b1)从自编码部件传送的CLD中提取CLD参数；

b2)从自CLD分析步骤b1)中提取的CLD参数中提取每个音频信号的功率增益；和

b3)通过基于有关输入音频信号的渲染的控制信息控制在增益因子转换步骤b2)中提取的每个音频信号的功率增益，来计算受控功率增益，

m表示子带的索引，而l表示D_CLD ^Q(ott，l，m)中的参数组的索引。

40.如权利要求39所述的方法，其中在该增益因子转换步骤b2)中提取输入音频信号的功率增益(G_m)，并且该功率增益表达为公式19：

$G_m=\left[\begin{array}{c}p{G}_{l,m}^{\mathrm{Lf}}\\ p{G}_{l,m}^{\mathrm{Ls}}\\ p{G}_{l,m}^{\mathrm{Rf}}\\ p{G}_{l,m}^{\mathrm{Rs}}\\ p{G}_{l,m}^C\\ p{G}_{l,m}^{\mathrm{lfe}}\end{array}\right]$

$p{G}_{l,m}^{\mathrm{Lf}}=G_{1,l,m}^L\·G_{3,l,m}^{\mathrm{Lf}}$

$p{G}_{l,m}^{\mathrm{Ls}}=G_{1,l,m}^L\·G_{3,l,m}^{\mathrm{Ls}}$

$p{G}_{l,m}^{\mathrm{Rf}}=G_{1,l,m}^R\·G_{4,l,m}^{\mathrm{Rf}}$

$p{G}_{l,m}^{\mathrm{Rs}}=G_{1,l,m}^R\·G_{4,l,m}^{\mathrm{Rs}}$

$p{G}_{l,m}^C=G_{1,l,m}^{\mathrm{Clfe}},$ $p{G}_{l,m}^{\mathrm{lfe}}=0$ (m＞1)

$p{G}_{l,m}^{\mathrm{lfe}}=G_{1,l,m}^{\mathrm{Clfe}}\·G_{2,l,m}^{\mathrm{lfe}},$ $p{G}_{l,m}^C=G_{1,l,m}^{\mathrm{Clfe}}\·G_{2,l,m}^C$ (m＝0，1)

$G_{0,l,m}^{\mathrm{Clfe}}=\frac{1}{\sqrt{1+{10}^{D_{\mathrm{CLD}}^Q(0,l,m)/10}}}$

$G_{0,l,m}^{\mathrm{LR}}=G_{0,l,m}^{\mathrm{Clfe}}\·{10}^{D_{\mathrm{CLD}}^Q(0,l,m)/20}$ 公式19

其中G_m的系数是表示第m子带的功率增益的矢量；和

G_m是表示第m子带中的所有输入音频信号的功率增益的矢量。

41.如权利要求40所述的方法，其中在该增益因子控制步骤b3)中，通过根据平移定律基于有关输入音频信号的渲染的控制信息控制在增益因子转换步骤b2)中提取的输入音频信号的功率增益(G_m)，来计算如公式20表达的受控功率增益(_outG_m)，公式20表达为：

$G_m^{\mathrm{out}}=\left[\begin{array}{c}g_m^1{}_{\mathrm{out}}\\ g_m^2{}_{\mathrm{out}}\\ .\\ .\\ .\\ g_m^M{}_{\mathrm{out}}\end{array}\right]={[\mathrm{\α},\mathrm{\β}]}_{M\×N}{G}_m$ 公式20

其中M表示输出音频信号的数目；

N表示输入音频信号的数目；和

[α，β]_M×N表示由系数α_k和β_k组成的M×N矢量，所述系数α_k和β_k被计算来将输入音频信号(pG_l，m ^k)映射到任意输出音频信号之间的位置。

42.如权利要求41所述的方法，其中所述平移定律是恒定功率平移(CPP)定律，并且所述系数α_k和β_k表达为公式21：

α_k＝cos(θ_m)，β_k＝sin(θ_m)

公式21

其中θ_pan，k表示输入音频信号(pG_l，m ^k)所映射到的输出音频信号之间的角度信息；

张角表示输出音频信号之间的角度信息；和

θ_ref表示输出音频信号之间的基准输出音频信号的角度信息。

43.如权利39所述的方法，其中所述空间线索渲染步骤b)还包括步骤：

b4)将从所述增益因子控制步骤b3)输出的受控功率增益转换为CLD值，和

在解码步骤a)中，使用从在CLD转换步骤b4)中的转换获取的CLD值作为受控空间信息，该受控空间信息是执行输入音频信号的渲染所需要的。

44.如权利要求43所述的方法，其中在该CLD转换步骤b4)中基于如下表达的公式22将受控功率增益转换为CLD值：

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(0,l,m)=20{\log }_{10}\left(\frac{p{G}_{\mathrm{Lf}}(l,m)}{p{G}_{\mathrm{Ls}}(l,m)}\right)$

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(1,l,m)=20{\log }_{10}\left(\frac{p{G}_{\mathrm{Rf}}(l,m)}{p{G}_{\mathrm{Rs}}(l,m)}\right)$

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(2,l,m)=10{\log }_{10}\left(\frac{p{G}_{\mathrm{Lf}}^2(l,m)+p{G}_{\mathrm{Ls}}^2(l,m)}{p{G}_{\mathrm{Rf}}^2(l,m)+p{G}_{\mathrm{Rs}}^2(l,m)}\right)$

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(3,l,m)=20{\log }_{10}\left(\frac{p{G}_C(l,m)}{p{G}_{\mathrm{lfe}}(l,m)}\right)$

$D_{\mathrm{CLD}}^{\mathrm{mod}\mathrm{fied}}(4,l,m)=10{\log }_{10}\left(\frac{p{G}_{\mathrm{Lf}}^2(l,m)+p{G}_{\mathrm{Ls}}^2(l,m)+p{G}_{\mathrm{Rf}}^2(l,m)+p{G}_{\mathrm{Rs}}^2(l,m)}{p{G}_C^2(l,m)+p{G}_{\mathrm{lfe}}^2(l,m)}\right)$ 公式22。

45.如权利要求39所述的方法，其中在解码步骤a)中根据应用了HRTF系数的双声道解码方法而输出双声道立体声信号。

46.一种用于控制音频信号的渲染的方法，包括步骤：

a)使用空间音频编码(SAC)方法来解码输入音频信号，所述输入音频信号是以SAC方法编码的缩混信号；和

b)接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息，

其中在解码步骤a)中，基于在空间线索渲染步骤b)中控制的空间线索信息执行输入音频信号的渲染，和

基于公式23从缩混的信号L0和R0中提取中央信号(C)、左半平面信号(Lf+Ls)、和右半平面信号(Rf+Rs)，和

所述空间线索信息是表示输入音频信号之间的电平差并表达为CLD_LR/Clfe，CLD_L/R，CLD_C/lfe，CLD_Lf/Ls和CLD_Rf/Rs的声道电平差(CLD)值，并且

该空间线索渲染步骤b)包括步骤：

b1)从自编码部件传送的CLD中提取CLD参数；

b2)从在CLD分析步骤b1)中提取的CLD参数中提取每个音频信号的功率增益；和

b3)通过基于有关输入音频信号的渲染的控制信息控制在增益因子转换步骤b2)中提取的每个音频信号的功率增益，来计算受控功率增益，

公式23表达为：

$R_1^{\′l,m}=\left[\begin{array}{cc}{w}_{11}^{l,m}& w_{12}^{\′l,m}\\ w_{21}^{\′l,m}& w_{22}^{l,m}\\ w_{31}^{l,m}\sqrt{2}& w_{32}^{l,m}\sqrt{2}\\ w_{11}^{l,m}& w_{12}^{l,m}\\ w_{21}^{\′l,m}& w_{22}^{l,m}\end{array}\right],$ 0≤m＜m_tttLowProc(0)，0≤l＜L

$w_{12}^{\′l,m}=\frac{P_{\mathrm{pan}}^L}{\sqrt{P_C/2+P_{\mathrm{Rf}}+P_{\mathrm{Rs}}}}$

$w_{21}^{\′l,m}=\frac{P_{\mathrm{pan}}^R}{\sqrt{P_C/2+P_{\mathrm{Lf}}+P_{\mathrm{Ls}}}}$

$w_{13}^{\′l,m}=\frac{P_{\mathrm{pan}}^{\mathrm{CL}}}{\sqrt{\mathrm{Pc}/2+P_{\mathrm{Rf}}+P_{\mathrm{Rs}}}}$

$w_{31}^{\′l,m}=\frac{P_{\mathrm{pan}}^{\mathrm{CR}}}{\sqrt{P_C/2+P_{\mathrm{Lf}}+P_{\mathrm{Ls}}}}$

${\left(w_{11}^{\′l,m}\right)}^2+{\left(w_{21}^{\′l,m}\right)}^2+{\left(w_{31}^{\′l,m}\right)}^2=1$

${\left(w_{12}^{\′l,m}\right)}^2+{\left(w_{22}^{\′l,m}\right)}^2+{\left(w_{32}^{\′l,m}\right)}^2=1$ 公式23

其中w_ij ^l，m是从基于CLD值(CLD_LR/Clfe，CLD_L/R，CLD_C/lef，CLD_Lf/Ls和CLD_Rf/Rs)计算的功率增益中生成的系数(i和j是矢量矩阵的索引；m是子带的索引；以及l是参数组的索引)；

m_tttLowProc是子带的数目；

P_C，P_Lf，P_Ls，P_Rf，P_Rs是中央信号、左前信号、左后信号、右前信号和右后信号的功率增益；

P_pan ^L表示基于平移定律的投影功率，与P_C，P_Lf，P_Ls的组合成比例；

P_pan ^R表示基于平移定律的投影功率，与P_C，P_Rf，P_Rs的组合成比例；和

P_pan ^CL和P_pan ^CR分别是相对于中央声道的左半平面和右半平面的平移功率增益。

47.如权利要求46所述的方法，其中在该增益因子转换步骤b2)中，基于CLD值(CLD_LR/Clfe，CLD_L/R，CLD_C/lfe，CLD_Lf/Ls和CLD_Rf/Rs)提取输入音频信号的功率增益(P_C，P_Lf，P_Ls，P_Rf，P_Rs)。

48.如权利要求47所述的方法，其中在该增益因子控制步骤b3)中，通过基于有关输入音频信号的渲染的控制信息控制在该增益因子转换步骤b2)中提取的输入音频信号的功率增益(P_C，P_Lf，P_Ls，P_Rf，P_Rs)，来附加地计算功率增益(P_pan ^L，P_pan ^R，P_pan ^CL和P_pan ^CR)，和

受控功率增益是基于获得的功率增益(P_C，P_Lf，P_Ls，P_Rf，P_Rs，P_pan ^L，P_pan ^R，P_pan ^CL和P_pan ^CR)来计算的。

49.如权利要求48所述的方法，其中所述受控功率增益是基于如下表达的公式24来计算的：

$g_m^{\mathrm{Lf}}{}_{\mathrm{out}}=\sqrt{P_{\mathrm{Lf}}+P_{\mathrm{pan}}^L}$

$g_m^{\mathrm{Ls}}{}_{\mathrm{out}}=\sqrt{P_{\mathrm{Ls}}}$

$g_m^{\mathrm{Rf}}{}_{\mathrm{out}}=\sqrt{P_{\mathrm{Rf}}+P_{\mathrm{pan}}^R}$

$g_m^{\mathrm{Rs}}{}_{\mathrm{out}}=\sqrt{P_{\mathrm{Rs}}}$

$g_m^{\mathrm{CL}}{}_{\mathrm{out}}=\sqrt{P_C/2}$

$g_m^{\mathrm{CR}}{}_{\mathrm{out}}=\sqrt{P_C/2}$ 公式24。

50.如权利要求46所述的方法，其中在该解码步骤a)中，根据应用了HRTF系数的双声道解码方法而输出双声道立体声信号。

51.一种用于控制音频信号的渲染的方法，包括步骤：

a)使用空间音频编码(SAC)方法来解码输入音频信号，所述输入音频信号是以SAC方法编码的缩混信号；和

b)接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息，

其中在解码步骤a)中，基于在空间线索渲染步骤b)中控制的空间线索信息执行输入音频信号的渲染，和

所述空间线索信息是表示输入音频信号的缩混率的声道预测系数(CPC)和表示输入音频信号之间的电平差的声道电平差(CLD)，并且

该空间线索渲染步骤b)包括：

b1)从自编码部件传送的CPC和CLD中提取CPC参数和CLD参数；

b2)通过从在CPC/CLD分析步骤b1)中提取的CPC参数中提取中央信号、左半平面信号和右半平面信号并且从CLD参数中提取左信号分量和右信号分量的功率增益，而提取每个信号的功率增益；和

b3)通过基于有关输入音频信号的渲染的控制信息控制在该增益因子转换步骤b2)中提取的每个音频信号的功率增益，计算受控功率增益。

52.如权利要求21所述的方法，其中在该增益因子转换步骤b2)中，基于如下表达的公式25从在CPC/CLD分析步骤b1)中提取的CPC参数中提取中央信号、左半平面信号和右半平面信号：

$M_{\mathrm{PDC}}\left[\begin{array}{c}{l}_0\\ r_0\end{array}\right]=\left[\begin{array}{c}l\\ r\\ c\end{array}\right]$

$M_{\mathrm{PDC}}=\left[\begin{array}{cc}{c}_{11}& c_{12}\\ c_{21}& c_{22}\\ c_{31}& c_{32}\end{array}\right]$ 公式25

其中l₀，r₀，l，r，c表示输入音频信号L0和R0、左半平面信号(Ls+Lf)、右半平面信号(Rf+Rs)、以及中央信号(C)；和

M_PDC表示在CPC/CLD分析步骤b1)中提取的CPC参数矢量。

53.如权利要求52所述的方法，其中在该CPC/CLD分析步骤b1)中提取的CLD参数是左信号分量之间的电平差信息和右信号分量之间的电平差信息，和

在该增益因子转换步骤b2)中，基于CLD参数，从所提取的中央信号、左半平面信号和右半平面信号中计算左信号分量(Ls，Lf)的功率增益和右信号分量(Rf，Rs)的功率增益。

54.如权利要求53所述的方法，其中在该增益因子控制步骤b3)中，通过根据平移定律基于有关输入音频信号的渲染的控制信息控制在增益因子转换步骤b2)中提取的输入音频信号的功率增益，来计算如公式26表达的受控功率增益(_outG_m)，公式26表达为：

$G_m^{\mathrm{out}}=\left[\begin{array}{c}g_m^1{}_{\mathrm{out}}\\ g_m^2{}_{\mathrm{out}}\\ .\\ .\\ .\\ g_m^M{}_{\mathrm{out}}\end{array}\right]={[\mathrm{\α},\mathrm{\β}]}_{M\×N}{G}_m$ 公式26

其中G_m表示输入音频信号的功率增益矢量；

_outG_m表示受控功率增益矢量；

M表示输出音频信号的数目；

N表示输入音频信号的数目；和

[α，β]_M×N表示由系数α_k和β_k组成的M×N矢量，所述系数α_k和β_k被计算来将输入音频信号(g_m ^k)映射到任意输出音频信号之间的位置。

55.如权利要求54所述的方法，其中所述平移定律是恒定功率平移(CPP)定律，并且所述系数α_k和β_k分别是α_k＝cos(θ_k)，β_k＝sin(θ_k)，

其中θ_k是输入音频信号(g_m ^k)所映射的输出音频信号之间的角度信息。

56.如权利要求51所述的方法，其中所述空间线索渲染步骤b)还包括步骤：

b4)将在所述增益因子控制步骤b3)中输出的受控功率增益转换为CLD值，和

在解码步骤a)中，使用从在CLD转换步骤b4)中的转换获取的CLD值作为受控空间信息，该受控空间信息是执行输入音频信号的渲染所需要的。

57.如权利要求56所述的方法，其中在CLD转换步骤b4)中，基于如下表达的公式27将受控功率增益转换为CLD值：

转换后的 ${\mathrm{CLD}}_m^i=20{\log }_{10}\frac{g_m^k{}_{\mathrm{out}}}{g_m^j{}_{\mathrm{out}}}$ 公式27

其中转换后的CLD_m ⁱ是从在CLD转换步骤b4)中的转换获得的CLD值；

i表示CLD索引(1≤i≤M-1)；

M表示第m子带中的音频信号的数目；和

_outg_m ^k和_outg_m ^j分别表示第m子带中的第j音频信号和第k音频信号的受控功率增益。

58.如权利要求51所述的方法，其中在解码步骤a)中，根据应用了HRTF系数的双声道解码方法而输出双声道立体声信号。

59.一种用于控制音频信号的渲染的方法，包括步骤：

a)使用空间音频编码(SAC)方法来解码输入音频信号，所述输入音频信号是以SAC方法编码的缩混信号；和

b)接收空间线索信息和有关该输入音频信号的渲染的控制信息，并且基于该控制信息来控制空间线索域中的空间线索信息，

其中在解码步骤a)中，基于在空间线索渲染步骤b)中控制的空间线索信息，来执行输入音频信号的渲染，和

该空间线索信息是表示输入音频信号之间的相关性的声道间相关性(ICC)值，和

在空间线索渲染步骤b)中，基于如下表达的公式28通过线性内插处理来控制ICC参数：

ICC_Ls，Lf＝(1-η)ICC_Ls，Lf+ηICC_Rs，Rf

ICC_Rs，Rf＝(1-η)ICC_Rs，Rf+ηICC_Ls，Lf

$\mathrm{\η}=\frac{{\mathrm{\θ}}_{\mathrm{pan}}}{\mathrm{\π}},$ θ_pan≤π

$\mathrm{\η}=1-\frac{{\mathrm{\θ}}_{\mathrm{pan}}-\mathrm{\π}}{\mathrm{\π}},$ θ_pan＞π                公式28

其中θ_pan表示有关输入音频信号的渲染的控制信息。

60.如权利要求59所述的方法，其中在解码步骤a)中，根据应用了HRTF系数的双声道解码方法而输出双声道立体声信号。

Images