BRPI0806346B1 - Decodificador de áudio, método para decodificar sinais de áudio, receptor para receber sinais de áudio, sistema de comunicação para comunicar sinais de áudio, métodos para receber sinais de áudio e para transmitir e receber sinais de áudio, e dispositivo de reprodução de áudio - Google Patents
Decodificador de áudio, método para decodificar sinais de áudio, receptor para receber sinais de áudio, sistema de comunicação para comunicar sinais de áudio, métodos para receber sinais de áudio e para transmitir e receber sinais de áudio, e dispositivo de reprodução de áudio Download PDFInfo
- Publication number
- BRPI0806346B1 BRPI0806346B1 BRPI0806346-0A BRPI0806346A BRPI0806346B1 BR PI0806346 B1 BRPI0806346 B1 BR PI0806346B1 BR PI0806346 A BRPI0806346 A BR PI0806346A BR PI0806346 B1 BRPI0806346 B1 BR PI0806346B1
- Authority
- BR
- Brazil
- Prior art keywords
- audio signals
- audio
- mix
- objects
- parametric data
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 16
- 238000004891 communication Methods 0.000 title claims abstract description 4
- 230000006854 communication Effects 0.000 title claims abstract description 4
- 230000005236 sound signal Effects 0.000 claims abstract description 232
- 230000000694 effects Effects 0.000 claims abstract description 100
- 238000009877 rendering Methods 0.000 claims abstract description 41
- 238000003780 insertion Methods 0.000 claims description 30
- 230000037431 insertion Effects 0.000 claims description 30
- 230000003595 spectral effect Effects 0.000 claims description 11
- 230000001419 dependent effect Effects 0.000 claims description 7
- 238000006243 chemical reaction Methods 0.000 claims description 5
- 230000004048 modification Effects 0.000 claims description 4
- 238000012986 modification Methods 0.000 claims description 4
- 230000002123 temporal effect Effects 0.000 claims description 3
- 230000004044 response Effects 0.000 claims description 2
- 238000004590 computer program Methods 0.000 abstract description 2
- 239000000203 mixture Substances 0.000 description 72
- 238000012545 processing Methods 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000017105 transposition Effects 0.000 description 2
- 241001342895 Chorus Species 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000002301 combined effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000021615 conjugation Effects 0.000 description 1
- HAORKNGNJCEJBX-UHFFFAOYSA-N cyprodinil Chemical compound N=1C(C)=CC(C2CC2)=NC=1NC1=CC=CC=C1 HAORKNGNJCEJBX-UHFFFAOYSA-N 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- RDYMFSUJUZBWLH-UHFFFAOYSA-N endosulfan Chemical compound C12COS(=O)OCC2C2(Cl)C(Cl)=C(Cl)C1(Cl)C2(Cl)Cl RDYMFSUJUZBWLH-UHFFFAOYSA-N 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04S—STEREOPHONIC SYSTEMS
- H04S3/00—Systems employing more than two channels, e.g. quadraphonic
- H04S3/02—Systems employing more than two channels, e.g. quadraphonic of the matrix type, i.e. in which input signals are combined algebraically, e.g. after having been phase shifted with respect to each other
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/26—Pre-filtering or post-filtering
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/008—Multichannel audio signal coding or decoding using interchannel correlation to reduce redundancy, e.g. joint-stereo, intensity-coding or matrixing
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/04—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
- G10L19/16—Vocoder architecture
- G10L19/18—Vocoders using multiple modes
- G10L19/20—Vocoders using multiple modes using sound class specific coding, hybrid encoders or object based coding
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Computational Linguistics (AREA)
- Theoretical Computer Science (AREA)
- Mathematical Analysis (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Optimization (AREA)
- Mathematical Physics (AREA)
- Pure & Applied Mathematics (AREA)
- Algebra (AREA)
- Stereophonic System (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
decodificador de áudio, método para decodificar sinais de áudio, receptor para receber sinais de áudio, sistema de comunicação para comunicar sinais de áudio, métodos para receber sinais de áudio e para transmitir e receber sinais de áudio, e, produto de programa de computador. um decodificador de áudio (100) compreendendo meios de efeito, meios de decodificação e meios de renderização. os meios de efeito (500) geram sinais de áudio de mistura descendente modificados a partir de sinais de áudio de mistura descendente recebidos; citados sinais de áudio de mistura descendente recebidos compreendem uma mistura descendente de diversos objetos de áudio. citados sinais de áudio de mistura descendente modificados são obtidos aplicando efeitos a sinais de áudio estimados correspondentes a objetos de áudio compreendidos nos citados sinais de áudio de mistura descendente recebidos. citados sinais de áudio estimados são derivados dos sinais de áudio de mistura descendente recebidos com base nos paramétricos recebidos. citados dados paramétricos recebidos compreendem diversos parâmetros de objeto para cada um dos diversos objetos de áudio. citados sinais de áudio de mistura descendente modificados com base em um tipo de efeito aplicado, são decodificados pelos meios de decodificação ou renderizados por meios de renderização ou combinados com a saída de meios de renderização. os meios de decodificação (300) são arranjados para decodificar os objetos de áudio a partir de sinais de áudio de mistura descendente ou sinais de aúdio de mistura descendente modificados com base nos dados paramétricos. os meios de renderização (400) são arranjados para gerar pelo menos um sinal de áudio de saída a partir dos objetos de áudio decodificados.
Description
A invenção relaciona-se a um decodificador de áudio e em particular, porém não exclusivamente, a um decodificador Surround MPEG ou decodificador orientado a objeto.
Em codificadores áudio espaciais (paramétricos), parâmetros são extraídos dos sinais de áudio, de modo a produzir um número reduzido de sinais de áudio de mistura descendente (por exemplo, apenas um único sinal de mistura descendente correspondente a uma mistura descendente mono, ou dois sinais de mistura descendente para uma mistura descendente estéreo), e um conjunto correspondente de parâmetros descrevendo as propriedades espaciais do sinal de áudio original. Em decodifícadores de áudio espacial (paramétricos), as propriedades espaciais descritas pelos parâmetros espaciais transmitidos são usadas para recriar um sinal de multicanal espacial, que se parece muito com o sinal de áudio de multicanal original.
Recentemente, técnicas para processamento e manipulação de objetos de áudio individuais no lado da decodifícação tem atraído interesse significativo. Por exemplo, dentro da estrutura de trabalho MPEG, um grupo de trabalho foi iniciado sobre codificação de áudio espacial baseada em objeto. O objetivo deste grupo de trabalho é “explorar nova tecnologia e reutilização de componentes Surround MPEG atuais e tecnologias para codificação eficiente de taxa de bit de fontes de som múltiplas ou objetos em um número de canais de mistura descendente e correspondentes parâmetros espaciais”. Em outras palavras, o objetivo é codificar objetos de áudio múltiplos em um conjunto limitado de canais de mistura descendente com parâmetros correspondentes. No lado do decodificador, usuários interagem com o conteúdo, por exemplo, reposicionando os objetos individuais.
Tal interação com o conteúdo é facilmente realizada em decodificadores orientados a objeto. Isto é então realizado incluindo uma entrega que segue a decodificação. Citada entrega é combinada com a decodificação, para evitar a necessidade de determinar objetos individuais. A entrega dedicada correntemente disponível compreende posicionamento de objetos, ajuste de volume, ou equalização dos sinais de áudio renderizados.
Uma desvantagem dos decodificadores orientados a objetos conhecidos com a renderização incorporada é que permitem um conjunto limitado de manipulações de objetos, porque estes não produzem ou operam sobre os objetos individuais. Por outro lado, decodificação explícita dos objetos de áudio individuais é muito dispendiosa e ineficiente.
E um objetivo da invenção prover um decodificador melhorado para decodificar objetos de áudio que segue uma faixa mais ampla de manipulações de objetos, sem uma necessidade de decodificar objeto de áudio objetos de áudio individuais para esta finalidade.
Este objetivo é alcançado por um decodificador de áudio de acordo com a invenção. E suposto que um conjunto de objetos, cada um com sua forma de onda correspondente, tenha sido previamente codificado em um codificador orientado a objeto, o que gera um sinal de áudio de mistura descendente para um unido sinal no caso de um canal único, citado sinal de áudio de mistura descendente sendo uma mistura descendente de diversos objetos de áudio e dados paramétricos correspondentes. Os dados paramétricos compreendem um conjunto de parâmetros de objeto para cada um dos diferentes objetos de áudio. O receptor recebe o citado sinal de áudio de mistura descendente e os citados dados paramétricos. Este sinal de áudio de mistura descendente é adicionalmente alimentado a meios de efeito que geram sinal de áudio de mistura descendente modificado, aplicando efeitos a estimativas de sinais de áudio correspondendo a objetos de áudio selecionados, compreendidos no sinal de áudio de mistura descendente. Citadas estimativas de sinais de áudio são derivadas com base nos dados paramétricos. O sinal de áudio de mistura descendente modificado é adicionalmente fornecido a meios de decodificação ou meios de renderização, ou combinados com a saída de meios de renderização, dependendo de um tipo de efeito aplicado, por exemplo, um efeito de inserção ou envio. Os meios de decodificação decodificam os objetos de áudio a partir do sinal de áudio de mistura descendente fornecido aos meios de decodificação, citado sinal de áudio de mistura descendente sendo o sinal de áudio de mistura descendente originalmente recebido ou o sinal de áudio de mistura descendente modificado. Citada decodificação é executada com base nos dados paramétricos. Os meios de renderização geram, um sinal de áudio de saída espacial a partir dos objetos de áudio obtidos a partir dos meios de decodificação e opcionalmente a partir dos meios de efeito, dependendo do tipo de efeito aplicado.
A vantagem do decodificador de acordo com a invenção é que, no sentido de aplicar vários tipos de efeito, não é necessário que o objeto, ao qual o efeito deve ser aplicado, esteja disponível. Ao invés disso, a invenção propõe aplicar o efeito aos sinais de áudio estimados correspondendo aos objetos, antes ou em paralelo com a decodificação real. Portanto, decodificação de objeto explícita não é requerida, e a renderização emergente no decodificador é preservada.
Em uma realização, o decodificador compreende adicionalmente meios de modificação para modificar os dados paramétricos quando um envelope espectral ou temporal de um sinal de áudio estimado correspondente ao objeto ou a diversos objetos, é modificado pelo efeito inserido.
Um exemplo de tal efeito é uma distorção não linear que gera componentes espectrais de alta freqüência adicionais, ou um compressor multi-faixa. Se a característica espectral do sinal de áudio modificado, aplicar os parâmetros não modificados compreendidos nos dados paramétricos, conforme recebidos, pode conduzir a artefatos indesejados e possivelmente incômodos. Portanto, adaptar os parâmetros para coincidir com as novas características espectrais ou temporais melhora a qualidade do sinal de áudio resultante renderizado.
Em uma realização, a geração dos sinais de áudio estimados correspondentes a um objeto de áudio ou diversos objetos, compreende escalonamento dependente do tempo/freqüência dos sinais de áudio de mistura descendente com base nos parâmetros de potência correspondentes a objetos de áudio, citados parâmetros de potência estando compreendidos nos dados paramétricos recebidos.
A vantagem desta estimativa é que compreende uma multiplicação do sinal de áudio de mistura descendente. Isto toma o processo de estimativa simples e eficiente.
Em uma realização, os meios de decodificação compreendem um decodificador de acordo com o padrão Surround MPEG e meios de conversão para converter os dados paramétricos em dados paramétricos de acordo com o padrão Surround MPEG.
A vantagem de usar o decodificador Surround MPEG é que este tipo de decodificador é usado como uma máquina de renderização para um decodificador orientado a objeto. Neste caso, os parâmetros orientados a objeto são combinados com dados de controle de usuário e convertidos para parâmetros Surround MPEG, tais como diferenças de nível e parâmetros de correlação entre canais (pares). Daí, os parâmetros Surround MPEG resultam do efeito combinado de parâmetros orientados a objeto, isto é, informação transmitida, e as propriedades de renderização desejadas, isto é, informação controlável pelo usuário estabelecida no lado do decodificador. Em tal caso, não são requeridos sinais de objeto intermediários.
A invenção provê adicionalmente um receptor e um sistema de comunicação, bem como métodos correspondentes.
Em uma realização, os efeitos de inserir e enviar são aplicados simultaneamente. O uso, por exemplo, de efeitos de inserção não exclui o uso de efeitos de envio, e vice-versa.
A invenção provê adicionalmente um produto de programa de computador habilitando um dispositivo programável a executar o método de acordo com a invenção.
Estes e outros aspectos da invenção serão aparentes e esclarecidos com referência às realizações mostradas nos desenhos, nos quais:
Figura IA mostra esquematicamente um decodificador orientado a objeto;
Figura 18 mostra esquematicamente um decodificador orientado a objeto de acordo com a invenção;
Figura 19 mostra um exemplo de meios de efeito para um efeito de inserção;
Figura 20 mostra meios de modificação para modificar os dados paramétricos quando um envelope espectral de um sinal de áudio estimado correspondente ao objeto ou a diversos objetos é modificado pelo efeito de inserção;
Figura 21 mostra um exemplo de meios de efeito para um efeito de envio;
Figura 22 mostra meios de decodificação, os meios de decodificação compreendendo um decodificador de acordo com padrão
Surround MPEG, e meios de conversão para converter os dados paramétricos em dados paramétricos de acordo com o padrão Surround MPEG;
Figura 23 mostra um sistema de transmissão para comunicação de um sinal de áudio de acordo com algumas realizações da invenção.
Através das figuras, os mesmos numerais de referência indicam características similares ou correspondentes. Algumas das características indicadas nos desenhos são tipicamente implementadas em software e como tais representam entidades de software, tais módulos ou objetos de software.
Figura IA mostra esquematicamente um decodificador orientado a objeto 100 conforme conhecido, por exemplo, a partir de C.Faller: “Parametric Joint-Coding of Audio Sources”, AES 120th Convention, Paris, France, Preprint 6752, Maio 2006. E suposto que um conjunto de objetos, cada um com sua forma de onda correspondente, foi previamente codificado em um codificador orientado a objeto, o que gera um sinal de áudio de mistura descendente (um único sinal no caso de um canal único, ou dois sinais no caso de dois canais (= estéreo)), citado sinal de áudio de mistura descendente sendo uma mistura descendente de diversos objetos de áudio caracterizados por dados paramétricos correspondentes. Os dados paramétricos compreendem um conjunto de parâmetros de objeto para cada um dos diferentes objetos de áudio. O receptor 200 recebe citado sinal de áudio de mistura descendente e citados dados paramétricos.
O sinal fornecido ao receptor 200 é um único sinal que corresponde ao fluxo de dados de áudio de mistura descendente multiplexados que corresponde ao sinal de áudio de mistura descendente e aos dados paramétricos. A função do receptor é então desmultiplexar os dois fluxos de dados. Se o sinal de áudio de mistura descendente é provido na forma comprimida (tal como a camada 3 MPEG-1) o receptor 200 também executa descompressão ou decodificação do sinal de áudio comprimido em um sinal de áudio de mistura descendente no domínio do tempo.
Embora a entrada do receptor 200 seja exibida como um caminho único de sinal/dados, esta poderia também compreender caminhos de dados múltiplos para sinais de áudio de mistura descendente separados e/ou dados paramétricos. Conseqüentemente, os sinais de áudio de mistura descendente e os dados paramétricos são fornecidos a meios de decodificação 300 que decodificam os objetos de áudio a partir dos sinais de áudio de mistura descendente, com base nos dados paramétricos. Os objetos de áudio decodificados são adicionalmente fornecidos a meios de renderização 400 para gerar pelo menos um sinal de áudio de saída a partir de objetos de áudio decodificados. Embora os meios de decodificação e meios de renderização sejam conduzidos como unidades separadas, estes freqüentemente são mesclados. Como resultado de tal mesclagem dos meios de decodificação e processamento de renderização, não há necessidade de decodificação explícita de objetos de áudio individuais. Ao invés disso, sinais de áudio renderizados são providos a custo computacional muito mais baixo, e sem perda de qualidade de áudio.
Figura 1B mostra esquematicamente um decodificador orientado a objeto 110 de acordo com a invenção. O receptor 200 recebe o citado sinal de áudio de mistura descendente e os citados dados paramétricos. O sinal de áudio de mistura descendente e os dados paramétricos são adicionalmente fornecidos ao meios de efeito 500 que geram sinal de áudio de mistura descendente modificado, aplicando efeitos a estimativas de sinais de áudio correspondentes a objetos de áudio selecionados compreendidos no sinal de áudio de mistura descendente. Citadas estimativas de sinais de áudio são derivadas com base nos dados paramétricos. O sinal de áudio de mistura descendente modificado é adicionalmente fornecido a meios de decodificação 300, ou meios de renderização 400, ou combinados com a saída de meios de renderização dependendo de um tipo de efeito aplicado, por exemplo, um efeito de inserção ou envio. Os meios de decodificação 300 decodificam os objetos de áudio a partir do sinal de áudio de mistura descendente fornecido aos meios de decodificação, citado sinal de áudio de mistura descendente sendo o sinal de áudio de mistura descendente recebido originalmente ou o sinal de áudio de mistura descendente modificado. Citada decodificação é efetuada com base nos dados paramétricos. Os meios de renderização 400 geram um sinal de áudio de saída espacial a partir dos objetos de áudio obtidos dos meios de decodificação 300 e opcionalmente a partir dos meios de efeito 400.
Figura 2 mostra um exemplo de meios de efeito 500 para um efeito de inserção. Os sinais de mistura descendente 501 são fornecidos aos meios de efeito 500; estes sinais são fornecidos em paralelo a unidades 511 e 512 que estão compreendidas em meios de estimativas 510. Os meios de estimativas 510 geram os sinais de áudio estimados correspondentes a um objeto ou diversos objetos aos quais o efeito de inserção deve ser aplicado, e o sinal de áudio estimado correspondente aos objetos restantes. A estimativa de sinais de áudio correspondentes a um objeto ou diversos objetos aos quais o efeito de inserção deve ser aplicado, é executada pela unidade 511, enquanto a estimativa do sinal de áudio correspondente aos objetos restantes é executada pela unidade 512. Citada estimativa é baseada nos dados paramétricos 502 que são obtidos do receptor 200. Conseqüentemente, o efeito de inserção são aplicados pelos meios de inserção 530 nos sinais de áudio estimados correspondentes a um objeto ou a diversos objetos aos quais o efeito de inserção deve ser aplicado. Um somador 540 adiciona os sinais de áudio providos a partir dos meios de inserção 530 e o sinal de áudio estimado correspondentes aos objetos restantes, portanto, juntando novamente todos os objetos. O sinal de mistura descendente modificado 503 resultante é adicionalmente fornecido aos meios de decodificação 300 do decodificador
orientado a objeto 110. No restante do texto, todas as vezes que as unidades 200, 300 ou 400 são referidas estão compreendidas em um decodificador orientado a objeto 110.
Os exemplos de efeitos de inserção são entre outros: compressão de faixa dinâmica, geração de distorção (por exemplo, para simular amplificadores de guitarra) ou vocoder. Estes tipos de efeitos é aplicado preferivelmente em um conjunto limitado (preferivelmente único) de objetos de áudio.
Figura 3 mostra meios de modificação 600 para modificar os dados paramétricos quando um envelope espectral de um sinal de áudio estimado correspondente ao objeto ou a diversos objetos, é modificado pelo efeito de inserção. As unidades 511 e 512 estão estimando, por exemplo, objetos de áudio individuais, enquanto a unidade 513 estima os objetos de áudio restantes juntos. Os meios de inserção 530 compreendem unidades separadas 531 e 532 que aplicam efeitos de inserção nos sinais estimados obtidos a partir das unidades 511 e 512, respectivamente. Um somador 540 adiciona os sinais de áudio providos a partir dos meios de inserção 530 e o sinal de áudio estimado correspondentes aos objetos restantes, portanto, montando novamente todos os objetos juntos. O sinal de mistura descendente modificado 503 resultante é adicionalmente fornecido aos meios de decodificação 300 do decodificador orientado a objeto 110.
Os efeitos de inserção usados nas unidades 531 e 532 são do mesmo tipo ou diferem. O efeito de inserção usado pela unidade 532 é por exemplo, uma distorção não linear que gera componentes espectrais de alta freqüência adicionais, ou um compressor multi-faixa. Se a característica espectral do sinal de áudio modificado tiver mudado, aplicar os parâmetros não modificados compreendidos nos dados paramétricos conforme recebidos nos meios de decodificação 300, pode conduzir a artefatos indesejados e possivelmente incômodos. Portanto, adaptar os dados paramétricos para coincidir com as novas características espectrais melhora a qualidade do sinal de áudio resultante. Esta adaptação dos dados paramétricos é efetuada na unidade 600. O dados paramétricos adaptados 504 são fornecidos aos meios de decodificação 300 e são usados para decodificar o(s) sinal(is) de mistura descendente modificados 503.
Deveria ser notado que as duas unidades 531 e 532 compreendidas nos meios de inserção 530 são apenas um exemplo. O número de unidades pode variar, dependendo do número de efeitos de inserção a serem aplicados. Adicionalmente, as unidades 531 e 532 podem ser implementadas em hardware ou software.
Figura 4 mostra um exemplo de meios de efeito para um efeito de envio. Os sinais de mistura descendente 501 são fornecidos aos meios de efeito 500, estes sinais são alimentados em paralelo às unidades 511 e 512 que estão compreendidas nos meios de estimativa 510. Os meios de estimativas 510 geram os sinais de áudio estimados correspondentes a um objeto ou diversos objetos aos quais o efeito de envio deve ser aplicado. Citada estimativa é baseada nos dados paramétricos 502 que são obtidos a partir do receptor 200. Conseqüentemente, ganhos são aplicados pelos meios de ganho 560 nos sinais de áudio estimados correspondentes a um objeto ou a diversos objetos obtidos a partir dos meios de estimativa 510. Ganhos, que também poderiam ser referidos como pesos, determinam a quantidade do efeito por objeto ou diversos objetos. Cada uma das unidades 561 e 562 aplica ganho a sinais de áudio individuais obtidos a partir dos meios de estimativa. Cada uma destas unidades pode aplicar vários ganhos. Um somador 540 adiciona os sinais de áudio providos a partir dos meios de ganho 560 e uma unidade 570 aplica o efeito de envio. O sinal resultante 505, também chamado a saída “úmida” é fornecido aos meios de entrega, ou altemativamente é misturado (ou adicionado) à saída dos meios de renderização.
Os exemplos de efeitos de envio são entre outros reverberação, efeitos de modulação tais como chorus, flanger ou phaser.
Deveria ser notado que as duas unidades 561 e 562 compreendidas nos meios de ganho 560 são apenas um exemplo. O número de unidades pode ser muito dependente do número de sinais correspondendo a objetos de áudio ou diversos objetos de áudio para os quais o nível de efeito de envio deve ser estabelecido.
Os meios de estimativa 510 e os meios de ganho 560 podem ser combinados em uma única etapa de processamento que estima uma combinação ponderada de sinais de objeto múltiplos. Os ganhos 561 e 562 podem ser incorporados nos meios de estimativa 511 e 512, respectivamente. Isto é também descrito nas equações abaixo, onde Q é uma (estimativa de) combinação ponderada de sinais de objeto e é obtida por operação de escalonamento única por tile de tempo/freqüência.
Os ganhos por objeto ou combinação de objetos podem ser interpretados como “níveis de efeito de envio”. Em várias aplicações, a quantidade de efeito é preferivelmente controlável pelo usuário por objeto. Por exemplo, o usuário pode desejar um dos objetos sem reverberação, outro objeto com uma pequena quantidade de reverberação e ainda outro objeto com a reverberação plena. Em tal exemplo, os ganhos por objeto poderiam ser iguais a 0, 0,5 e 1,0 para cada um dos respectivos objetos.
Em uma realização, a geração de sinais de áudio estimados correspondentes a um objeto de áudio ou a diversos objetos compreende escalonamento dependendo de tempo/freqüência dos sinais de áudio de mistura descendente com base nos parâmetros de potência correspondendo a objetos de áudio, citados parâmetros de potência estando compreendidos nos dados paramétricos.
Esta realização é explicada para o exemplo a seguir. No codificador, I sinais de objeto sfln], i = 0,..., 1-1, com n sendo o índice de amostra, são misturados descendentemente para criar um sinal de mistura descendente x[n], pelo somatório dos sinais de mistura descendente:
O sinal de mistura descendente é acompanhado por parâmetros orientados a objeto que descrevem a potência de sinal (relativa) de cada objeto dentro de tiles de tempo/freqüência do sinal de mistura descendente x[n]. Os sinais de objeto st[n] são por exemplo, primeiramente colocados em janelas usando janelas de análise superpostas w[n]‘.
Com L sendo a extensão da janela e, por exemplo, L/2 o tamanho de transposição correspondente (supondo 50% de superposição) e m o índice de janela. Uma forma típica da janela de análise é uma janela de Hanning:
Os sinais segmentados resultantes Si[n,m] são subseqüentemente transformados para o domínio da freqüência, usando uma FFT.
Com k sendo um índice bin FFT. Os índices bin FFT k são subseqüentemente agrupados em bandas de parâmetro b. Em outras palavras, cada banda de parâmetro b correspondente a um conjunto de índices bin de freqüência adjacente k. Para cada banda de parâmetro b e cada segmento m de cada sinal de objeto Si[k,m], um valor de potência σ,2[Z>,m]e computado:
com (*) sendo o operador de conjugação complexo. Estes parâmetros σ;2[Z>,m] estão compreendidos nos dados paramétricos (preferivelmente quantizados no domínio logarítmico.
O processo de estimativa de um objeto ou diversos objetos no decodificador de áudio orientado a objeto compreende escalonamento dependente do tempo/freqüência do sinal de áudio de mistura descendente. Um sinal de mistura descendente discreto no tempo x[n] com n sendo o mesmo índice, é dividido em tiles de tempo/freqüência X[k,m] com k sendo o índice de freqüência e m um índice de quadro (segmento temporal). Isto é obtido, por exemplo, colocando em janelas o sinal x[n] com uma janela de análise w[n]\
Sendo L a extensão da janela e L/2 o tamanho de transposição correspondente. Neste caso, uma janela de análise preferida é dada pela raiz quadrada da janela de Hanning:
Subseqüentemente, o sinal em janelas x[n,m] é transformado para o domínio doa freqüência usando uma FFT:
As componentes no domínio da freqüência de X[k,m] são subseqüentemente agrupadas nas assim chamadas bandas de parâmetro b (b = 0,..., B-l). Estas bandas de parâmetro coincidem com as bandas de parâmetro no codificador. A estimativa do lado do decodificador S^k.m] do segmento m do objeto i é dada por:
Com b(k) sendo a banda de parâmetro que foi associada ao índice de freqüência k.
Uma combinação ponderada Q dos sinais de objeto S, com pesos gi é dada por:
No decodificador orientado a objeto, Q pode ser estimado de acordo com:
Em outras palavras, um sinal de objeto ou qualquer combinação linear de diversos sinais de objeto de áudio podem ser estimados no decodificador de áudio orientado a objeto proposto, por um escalonamento dependente de tempo/freqüência do sinal de mistura descendente X[k,m].
No sentido de resultar nos sinais de saída no domínio do tempo, cada sinal de objeto estimado é transformado para o domínio do tempo (usando uma FFT inversa) multiplicado por uma janela de síntese (idêntica à janela de análise) e combinado com quadros prévios usando superposição- som.
Em uma realização, a geração dos sinais de áudio estimados compreende ponderar um objeto ou uma combinação de diversos objetos por meio de escalonamento dependente de tempo/freqüência dos sinais de áudio de mistura descendente, com base nos parâmetros de potência correspondentes a objetos de áudio, citados parâmetros de potência sendo compreendidos nos dados paramétricos recebidos.
Deveria ser notado que uma unidade de efeito de envio poderia ter mais sinais de saída que sinais de entrada. Por exemplo, no caso, uma unidade de reverberação estéreo ou multicanal possui um sinal de entrada mono.
Em uma realização, o sinal misturado descendendetemente e os dados paramétricos estão de acordo com o padrão Surround MPEG. O decodificador Surround MPEG existente seguinte à funcionalidade de decodificação também funciona como um dispositivo de renderização. Em tal caso, não são requeridos sinais de áudio intermediários correspondentes aos objetos de decodificação. A decodificação de objeto e renderização são combinadas em um único dispositivo.
Figura 5 mostra meios de decodificação, os meios de decodificação 300 compreendem um decodificador 320 de acordo com o padrão Surround MPEG e meios de conversão 310 para converter dados paramétricos em dados paramétricos de acordo com o padrão Surround MPEG. O(s) sinal(is) 508 correspondente(s) ao(s) sinal(is) de mistura descendente 501 ou sinal(is) de mistura descendente modificado(s) 503, quando os efeitos de inserção são aplicados, são alimentados ao decodificador Surround MPEG 320. Os meios de conversão baseados nos dados paramétricos 506 e dados de controle de usuário 507 convertem os dados paramétricos em dados paramétricos de acordo com o padrão Surround MPEG. Os dados paramétricos 506 são os dados paramétricos 502 ou os dados paramétricos modificados 504, quando o envelope espectral de um sinal de áudio estimado correspondente ao objeto ou a diversos objetos, é modificado pelo efeito de inserção. Os dados de controle de usuário 507 para o objeto ou diversos objetos, é modificado pelo efeito de inserção. Os dados de controle de usuário 507 podem, por exemplo, indicar a posição espacial desejada de um ou diversos objetos de áudio.
De acordo com uma das realizações, o método compreende as etapas de receber pelo menos um sinal de áudio de mistura descendente e dados paramétricos, gerando sinais de áudio de mistura descendente modificados, decodificando os objetos de áudio a partir dos sinais de áudio de mistura descendente, e gerando pelo menos um sinal de áudio de saída a partir dos objetos de áudio decodificados. No método, cada sinal de áudio de mistura descendente compreende uma mistura descendente de diversos objetos de áudio. Os dados paramétricos compreendem diversos parâmetros de objeto para cada um dos diversos objetos de áudio. Os sinais de áudio de mistura descendente modificados são obtidos aplicando efeitos a sinais de áudio estimados correspondendo a objetos de áudio compreendidos nos citados sinais de áudio de mistura descendente. Os sinais de áudio estimados são derivados dos sinais de áudio de mistura descendente, com base nos dados paramétricos. Os sinais de áudio de mistura descendente modificados baseados em um tipo do efeito aplicado são decodificados pelos meios de decodificação 300 ou renderizados pelos meios de renderização 400. A etapa de decodificação é executada pelos meios de decodificação 300 para os sinais de áudio de mistura descendente ou sinais de áudio de mistura descendente modificados, com base nos dados paramétricos.
A última etapa de gerar pelo menos um sinal de áudio de saída a partir dos objetos de áudio decodificados, que pode ser chamada uma etapa de renderização, pode ser combinada com a etapa de decodificação em uma etapa de processamento.
Em uma realização, um receptor para receber sinais de áudio compreende: um elemento de recepção, meios de efeito, meios de decodificação e meios de renderização. O elemento receptor recebe, de um transmissor, pelo menos um sinal de áudio de mistura descendente e dados paramétricos. Cada sinal de áudio de mistura descendente compreende uma mistura descendente de diversos objetos de áudio. Os dados paramétricos compreendem diversos parâmetros de objeto para cada um dos diversos objetos de áudio.
Os meios de efeito geram sinais de áudio de mistura descendente modificados. Estes sinais de áudio de mistura descendente modificados são obtidos aplicando efeitos a sinais de áudio estimados correspondentes a objetos de áudio compreendidos nos citados sinais de áudio de mistura descendente. Os sinais de áudio estimados são derivados dos sinais de áudio de mistura descendente com base nos dados paramétricos. Os sinais de áudio de mistura descendente modificados, baseados em um tipo do efeito aplicado, são decodificados pelos meios de decodificação ou renderizados pelos meios de renderização.
Os meios de decodificação decodificam os objetos de áudio a partir dos sinais de áudio de mistura descendente ou dos sinais de áudio de mistura descendente modificados, com base nos dados paramétricos. Os meios de renderização geram pelo menos um sinal de áudio de saída a partir dos objetos de áudio decodificados.
Figura 6 mostra um sistema de transmissão para um sinal de áudio de acordo com algumas realizações da invenção. O sistema de transmissão compreende um transmissor 700, que é acoplado a um receptor 900 através de uma rede 800. A rede 800 poderia ser por exemplo, a Internet.
O transmissor 700 é por exemplo, um dispositivo de gravação de sinal e o receptor 900 é por exemplo, um dispositivo reprodutor de sinal. No exemplo específico, quando uma função de gravação de sinal é suportada, o transmissor 700 compreende meios 710 para receber diversos objetos de áudio. Conseqüentemente, estes objetos são codificados pelos meios de codificação 720 para codificar os diversos objetos de áudio pelo menos em um sinal de áudio de mistura descendente e dados paramétricos. Uma realização de tais meios de codificação é dada em Faller, C./‘Parametric Joint-Coding of Audio Sources”, Proc 120 AES Convention, Paris, France, Maio 2006. Cada sinal de áudio de mistura descendente compreende uma mistura descendente de diversos objetos de áudio. Citados dados paramétricos compreendem diversos parâmetros de objeto para cada um dos diversos objetos de áudio. Os objetos de áudio codificados são transmitidos a um receptor 900 por meios 730 para transmitir sinais de áudio de mistura descendente e os dados paramétricos. Citados meios 730 possuem uma interface com a rede 800, e podem transmitir os sinais de áudio de mistura descendente através da rede 800.
O receptor 900 compreende um elemento receptor 910 para receber do transmissor 700 pelo menos um sinal de áudio de mistura descendente e dados paramétricos. Cada sinal de áudio de mistura descendente compreende uma mistura descendente de diversos objetos de áudio. Citados dados paramétricos compreendem diversos parâmetros de objeto para cada um dos diversos objetos de áudio. Os meios de efeito 920 gerar sinais de áudio de mistura descendente modificados. Citados sinais de áudio de mistura descendente modificados são obtidos, aplicando efeitos a sinais de áudio estimados correspondentes a objetos de áudio compreendidos nos citados sinais de áudio de mistura descendente. Citados sinais de áudio estimados são derivados dos sinais de áudio de mistura descendente, com base nos dados paramétricos. Citados sinais de áudio de mistura descendente modificados baseados em um tipo de efeito aplicado são decodificados pelos meios de decodificação, ou renderizados por meios de renderização, ou combinados com a saída de meios de renderização. Os meios de decodificação decodificam os objetos de áudio a partir dos sinais de áudio de mistura descendente ou dos sinais de áudio de mistura descendente modificados, com base nos dados paramétricos. Os meios de renderização geram pelo menos um sinal de áudio de saída a partir dos objetos de áudio decodificados.
Em uma realização, os efeitos de inserção e envio são aplicados simultaneamente.
Em uma realização, os efeitos são aplicados em resposta a entrada de usuário. O usuário pode, por meio, por exemplo, de um botão controle deslizante, botão ou interface de uso gráfico, ajustar os efeitos de acordo com as próprias preferências.
Deveria ser notado que as realizações acima mencionadas ilustram ao invés de limitar a invenção, e aqueles especialistas na técnica serão capazes de projetar muitas realizações alternativas, sem se afastar do 5 escopo das reivindicações anexas.
Nos desenhos que a acompanham, quaisquer sinais de referência colocados entre parênteses não serão considerados como limitando a reivindicação. A palavra “compreendendo” não exclui a presença de elementos ou etapas diferentes daqueles listados em uma reivindicação. A 10 palavra “um” ou “uma” precedendo um elemento não exclui a presença de diversos de tais elementos. A invenção pode ser implementada por meio de hardware compreendendo vários elementos distintos, e por meio de um computador adequadamente programado.
Claims (16)
1. Decodificador de áudio (100), caracterizado por compreender: meios de efeito (500) para gerar sinais de áudio de mistura descendente modificados a partir de sinais de áudio de mistura descendente recebidos, citados sinais de áudio de mistura descendente compreendendo uma mistura descendente de diversos objetos de áudio, citados sinais de áudio de mistura descendente modificados obtidos aplicando efeitos a sinais de áudio estimados correspondentes a objetos de áudio compreendidos nos citados sinais de áudio de mistura descendente recebidos, citados sinais de áudio estimados sendo derivados dos sinais de áudio de mistura descendente recebidos com base em dados paramétricos recebidos, citados dados paramétricos recebidos compreendendo diversos parâmetros de objeto para cada um dos diversos objetos de áudio, citados sinais de áudio de mistura descendente modificados com base em um tipo de efeito aplicado, sendo decodificados pelos meios de decodificação ou renderizados por meios de renderização ou combinados com a saída de meios de renderização; os meios de decodificação (300) sendo arranjados para decodificar os objetos de áudio a partir de sinais de áudio de mistura descendente ou sinais de áudio de mistura descendente modificados com base nos dados paramétricos; os meios de renderização (400) sendo arranjados para gerar pelo menos um sinal de áudio de saída a partir dos objetos de áudio decodificados.
2. Decodificador de acordo com a reivindicação 1, caracterizado pelos meios de efeito (500) serem arranjados para prover um efeito de inserção e compreenderem: meios de estimativa (510) para gerar os sinais de áudio estimados correspondentes a um objeto ou diversos objetos aos quais o efeito de inserção deve ser aplicado, e gerar o sinal de áudio estimado correspondente aos objetos restantes; meios de inserção (530) para aplicar o efeito de inserção aos sinais de áudio estimados correspondentes a um objeto ou diversos objetos aos quais o efeito de inserção deve ser aplicado; somador (540) para adicionar os sinais de áudio providos a partir dos meios de inserção e o sinal de áudio estimado correspondente aos objetos restantes.
3. Decodificador de acordo com a reivindicação 2, caracterizado pelo decodificador compreender adicionalmente meios de modificação (600) para modificar os dados paramétricos quando um envelope espectral ou temporal de um sinal de áudio estimado correspondente ao objeto ou diversos objetos, é modificado pelo efeito de inserção.
4. Decodificador de acordo com a reivindicação 1, caracterizado pelos meios de efeito serem arranjados para prover um efeito de envio e compreenderem: meios de estimativas (510) para gerar os sinais de áudio estimados correspondentes a um objeto ou diversos objetos aos quais o efeito de envio deve ser aplicado; meios de ganho (560) para determinar uma quantidade do efeito de envio para os sinais de áudio estimados correspondentes ao objeto ou os diversos objetos aos quais o efeito de envio deve ser aplicado; somador (540) para adicionar os sinais de áudio obtidos a partir dos meios de ganho; meios de envio (570) para aplicar o efeito de envio aos sinais de áudio obtidos a partir do somador.
5. Decodificador de acordo com a reivindicação 1, caracterizado pela geração dos sinais de áudio estimados correspondentes a um objeto de áudio ou diversos objetos, compreenderem escalonamento dependente de tempo/frequência dos sinais de áudio de mistura descendente com base nos parâmetros de potência correspondentes aos objetos de áudio, citados parâmetros de potência estando compreendidos nos dados paramétricos.
6. Decodificador de acordo com a reivindicação 5, caracterizado pela geração dos sinais de áudio estimados compreender ponderação de um objeto ou uma combinação de diversos objetos, por meio de escalonamento dependente de tempo/frequência dos sinais de áudio de mistura descendente, com base nos parâmetros de potência correspondentes a objetos de áudio, citados parâmetros de potência estando compreendidos nos dados paramétricos recebidos.
7. Decodificador de acordo com a reivindicação 1, caracterizado pelo sinal misturado descendendetemente e os dados paramétricos estarem de acordo com o padrão Surround MPEG.
8. Decodificador de acordo com a reivindicação 7, caracterizado pelos meios de decodificação (300) compreenderem um decodificador (320) de acordo com o padrão Surround MPEG e meios de conversão (310) para converter os dados paramétricos em dados paramétricos de acordo com o padrão Surround MPEG.
9. Método para decodificar sinais de áudio, caracterizado por compreender: receber pelo menos um sinal de áudio de mistura descendente e dados paramétricos, cada sinal de áudio de mistura descendente compreendendo uma mistura descendente de diversos objetos de áudio, citados dados paramétricos compreendendo diversos parâmetros de objeto para cada um dos diversos objetos de áudio; gerar sinais de áudio de mistura descendente modificados; citados sinais de áudio de mistura descendente obtidos aplicando efeitos a sinais de áudio estimados correspondentes a objetos de áudio compreendidos nos citados sinais de áudio de mistura descendente, citados sinais de áudio estimados sendo derivados dos sinais de áudio de mistura descendente com base nos dados paramétricos, citados sinais de áudio de mistura descendente modificados baseados em um tipo de efeito aplicado, sendo decodificados por meios de decodificação ou renderizados por meios de renderização ou combinados com a saída dos meios de renderização; decodificar os objetos de áudio a partir dos sinais de áudio de mistura descendente ou dos sinais de áudio de mistura descendente modificados, com base nos dados paramétricos; gerar pelo menos um sinal de áudio de saída a partir dos objetos de áudio decodificados.
10. Método, de acordo com a reivindicação 9, caracterizado pelos efeitos de inserção e envio serem aplicados simultaneamente.
11. Método, de acordo com a reivindicação 9, caracterizado pelos efeitos serem aplicados em resposta a entrada de usuário.
12. Receptor para receber sinais de áudio, caracterizado por compreender: decodificador de áudio compreendendo: meios de efeito (500) para gerar sinais de áudio de mistura descendente modificados a partir de sinais de áudio de mistura descendente recebidos, citados sinais de áudio de mistura descendente compreendendo uma mistura descendente de diversos objetos de áudio, citados sinais de áudio de mistura descendente modificados obtidos aplicando efeitos a sinais de áudio estimados correspondentes a objetos de áudio compreendidos nos citados sinais de áudio de mistura descendente recebidos, citados sinais de áudio estimados sendo derivados dos sinais de áudio de mistura descendente recebidos com base em dados paramétricos recebidos, citados dados paramétricos recebidos compreendendo diversos parâmetros de objeto para cada um dos diversos objetos de áudio, citados sinais de áudio de mistura descendente modificados com base em um tipo de efeito aplicado, sendo decodificados pelos meios de decodificação ou renderizados por meios de renderização ou combinados com a saída de meios de renderização; os meios de decodificação (300) sendo arranjados para decodificar os objetos de áudio a partir de sinais de áudio de mistura descendente ou sinais de áudio de mistura descendente modificados com base nos dados paramétricos; os meios de renderização (400) sendo arranjados para gerar pelo menos um sinal de áudio de saída a partir dos objetos de áudio decodificados; e um elemento receptor (200) para receber, de um transmissor, pelo menos um sinal de áudio de mistura descendente e dados paramétricos, cada sinal de áudio de mistura descendente compreendendo uma mistura descendente de diversos objetos de áudio, citados dados paramétricos compreendendo diversos parâmetros de objeto para cada um dos diversos objetos de áudio, o elemento receptor sendo acoplado aos meios de efeito (500) e meios de decodificação (300).
13. Sistema de comunicação para comunicar sinais de áudio, caracterizado por compreender: transmissor (700) compreendendo: meios (710) para receber diversos objetos de áudio, meios de codificação (720) para codificar os diversos objetos de áudio pelo menos em um sinal de áudio de mistura descendente e dados paramétricos, cada sinal de áudio de mistura descendente compreendendo uma mistura descendente de diversos objetos de áudio, citados dados paramétricos compreendendo diversos parâmetros de objeto para cada um dos diversos objetos de áudio, e meios (730) para transmitir sinais de áudio de mistura descendente e os dados paramétricos a um receptor; e o receptor (900) compreendendo: um elemento receptor (200) para receber, do citado transmissor, pelo menos um sinal de áudio de mistura descendente e dados paramétricos, cada sinal de áudio de mistura descendente compreendendo uma mistura descendente de diversos objetos de áudio, citados dados paramétricos compreendendo diversos parâmetros de objeto para cada um dos diversos objetos de áudio, e um elemento de decodificação compreendendo meios de decodificação e meios de efeito, o elemento receptor sendo acoplado a meios de efeito e a meios de decodificação.
14. Método para receber sinais de áudio, caracterizado por compreender: receber de um transmissor pelo menos um sinal de áudio de mistura descendente e dados paramétricos, cada sinal de áudio de mistura descendente compreendendo uma mistura descendente de diversos objetos de áudio, citados dados paramétricos compreendendo diversos parâmetros de objeto para cada um dos diversos objetos de áudio; gerar sinais de áudio de mistura descendente modificados; citados sinais de áudio de mistura descendente modificados obtidos aplicando efeitos a sinais de áudio estimados correspondentes a objetos de áudio compreendidos nos citados sinais de áudio de mistura descendente, citados sinais de áudio estimados sendo derivados dos sinais de áudio de mistura descendente com base nos dados paramétricos, citados sinais de áudio de mistura descendente modificados baseados em um tipo de efeito aplicado, sendo decodificados por meios de decodificação ou renderizados por meios de renderização ou combinados com a saída dos meios de renderização; decodificar os objetos de áudio a partir dos sinais de áudio de mistura descendente ou dos sinais de áudio de mistura descendente modificados, com base nos dados paramétricos, meios de renderização para gerar pelo menos um sinal de áudio de saída a partir dos objetos de áudio decodificados.
15. Método para transmitir e receber sinais de áudio, caracterizado por compreender: em um transmissor, efetuar as etapas de: receber diversos objetos de áudio, codificar os diversos objetos de áudio pelo menos em um sinal de áudio de mistura descendente e dados paramétricos, cada sinal de áudio de mistura descendente compreendendo uma mistura descendente de diversos objetos de áudio, citados dados paramétricos compreendendo diversos parâmetros de objeto para cada um dos diversos objetos de áudio, e transmitir sinais de áudio de mistura descendente e os dados paramétricos a um receptor; e no receptor efetuar as etapas de: receber do transmissor pelo menos um sinal de áudio de mistura descendente e dados paramétricos, cada sinal de áudio de mistura descendente compreendendo uma mistura descendente de diversos objetos de áudio, citados dados paramétricos compreendendo diversos parâmetros de objeto para cada um dos diversos objetos de áudio, gerar sinais de áudio de mistura descendente modificados; citados sinais de áudio de mistura descendente modificados obtidos, aplicando efeitos a sinais de áudio estimados correspondentes a objetos de áudio compreendidos nos citados sinais de áudio de mistura descendente, citados sinais de áudio estimados sendo derivados dos sinais de áudio de mistura descendente, com base nos dados paramétricos, citados sinais de áudio de mistura descendente modificados baseados em um tipo de efeito aplicado sendo decodificados pelos meios de decodificação, ou renderizados por meios de renderização, ou combinados com a saída de meios de renderização; decodificar os objetos de áudio a partir dos sinais de áudio de mistura descendente ou dos sinais de áudio de mistura descendente modificados, com base nos dados paramétricos, gerar pelo menos um sinal de áudio de saída a partir dos objetos de áudio decodificados.
16. Dispositivo de reprodução de áudio, caracterizado por compreender um decodificador de áudio que compreende: meios de efeito (500) para gerar sinais de áudio de mistura descendente modificados a partir de sinais de áudio de mistura descendente recebidos, citados sinais de áudio de mistura descendente compreendendo uma mistura descendente de diversos objetos de áudio, citados sinais de áudio de mistura descendente modificados obtidos aplicando efeitos a sinais de áudio estimados correspondentes a objetos de áudio compreendidos nos citados sinais de áudio de mistura descendente recebidos, citados sinais de áudio estimados sendo derivados dos sinais de áudio de mistura descendente recebidos com base em dados paramétricos recebidos, citados dados paramétricos recebidos compreendendo diversos parâmetros de objeto para cada um dos diversos
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP07100339 | 2007-01-10 | ||
| EP07100339.6 | 2007-01-10 | ||
| PCT/IB2008/050029 WO2008084427A2 (en) | 2007-01-10 | 2008-01-07 | Audio decoder |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| BRPI0806346A2 BRPI0806346A2 (pt) | 2011-09-06 |
| BRPI0806346A8 BRPI0806346A8 (pt) | 2015-10-13 |
| BRPI0806346B1 true BRPI0806346B1 (pt) | 2020-09-29 |
Family
ID=39609124
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| BRPI0806346-0A BRPI0806346B1 (pt) | 2007-01-10 | 2008-01-07 | Decodificador de áudio, método para decodificar sinais de áudio, receptor para receber sinais de áudio, sistema de comunicação para comunicar sinais de áudio, métodos para receber sinais de áudio e para transmitir e receber sinais de áudio, e dispositivo de reprodução de áudio |
Country Status (10)
| Country | Link |
|---|---|
| US (1) | US8634577B2 (pt) |
| EP (1) | EP2109861B1 (pt) |
| JP (1) | JP5455647B2 (pt) |
| KR (1) | KR101443568B1 (pt) |
| CN (1) | CN101578658B (pt) |
| BR (1) | BRPI0806346B1 (pt) |
| MX (1) | MX2009007412A (pt) |
| RU (1) | RU2466469C2 (pt) |
| TR (1) | TR201906713T4 (pt) |
| WO (1) | WO2008084427A2 (pt) |
Families Citing this family (26)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| MX2011011399A (es) * | 2008-10-17 | 2012-06-27 | Univ Friedrich Alexander Er | Aparato para suministrar uno o más parámetros ajustados para un suministro de una representación de señal de mezcla ascendente sobre la base de una representación de señal de mezcla descendete, decodificador de señal de audio, transcodificador de señal de audio, codificador de señal de audio, flujo de bits de audio, método y programa de computación que utiliza información paramétrica relacionada con el objeto. |
| WO2010073187A1 (en) * | 2008-12-22 | 2010-07-01 | Koninklijke Philips Electronics N.V. | Generating an output signal by send effect processing |
| CN102405194B (zh) * | 2009-04-21 | 2015-09-30 | 埃科莱布美国股份有限公司 | 用于控制水硬度的方法和设备 |
| CN102667919B (zh) | 2009-09-29 | 2014-09-10 | 弗兰霍菲尔运输应用研究公司 | 音频信号解码器和编码器、提供上混和下混信号表示型态的方法 |
| KR101426625B1 (ko) * | 2009-10-16 | 2014-08-05 | 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. | 평균값을 이용하여 다운믹스 신호 표현 및 이 다운믹스 신호 표현과 관련된 파라메트릭 보조 정보에 기초한 업믹스 신호 표현을 제공하기 위해 하나 이상의 조정된 파라미터를 제공하는 장치, 방법 및 컴퓨터 프로그램 |
| EP3779977B1 (en) | 2010-04-13 | 2023-06-21 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio decoder for processing stereo audio using a variable prediction direction |
| JP5903758B2 (ja) * | 2010-09-08 | 2016-04-13 | ソニー株式会社 | 信号処理装置および方法、プログラム、並びにデータ記録媒体 |
| CN103026406B (zh) * | 2010-09-28 | 2014-10-08 | 华为技术有限公司 | 用于对已解码多通道音频信号或已解码立体声信号进行后处理的装置和方法 |
| CN103050124B (zh) | 2011-10-13 | 2016-03-30 | 华为终端有限公司 | 混音方法、装置及系统 |
| WO2013064957A1 (en) * | 2011-11-01 | 2013-05-10 | Koninklijke Philips Electronics N.V. | Audio object encoding and decoding |
| KR101580240B1 (ko) | 2012-02-17 | 2016-01-04 | 후아웨이 테크놀러지 컴퍼니 리미티드 | 다채널 오디오 신호를 인코딩하는 파라메트릭 인코더 |
| US10844689B1 (en) | 2019-12-19 | 2020-11-24 | Saudi Arabian Oil Company | Downhole ultrasonic actuator system for mitigating lost circulation |
| JP6174129B2 (ja) | 2012-05-18 | 2017-08-02 | ドルビー ラボラトリーズ ライセンシング コーポレイション | パラメトリックオーディオコーダに関連するリバーシブルダイナミックレンジ制御情報を維持するシステム |
| KR20140027831A (ko) * | 2012-08-27 | 2014-03-07 | 삼성전자주식회사 | 오디오 신호 전송 장치 및 그의 오디오 신호 전송 방법, 그리고 오디오 신호 수신 장치 및 그의 오디오 소스 추출 방법 |
| EP3014901B1 (en) | 2013-06-28 | 2017-08-23 | Dolby Laboratories Licensing Corporation | Improved rendering of audio objects using discontinuous rendering-matrix updates |
| EP2830055A1 (en) | 2013-07-22 | 2015-01-28 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Context-based entropy coding of sample values of a spectral envelope |
| EP2830054A1 (en) | 2013-07-22 | 2015-01-28 | Fraunhofer Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio encoder, audio decoder and related methods using two-channel processing within an intelligent gap filling framework |
| FR3013496A1 (fr) * | 2013-11-15 | 2015-05-22 | Orange | Transition d'un codage/decodage par transformee vers un codage/decodage predictif |
| US10373711B2 (en) | 2014-06-04 | 2019-08-06 | Nuance Communications, Inc. | Medical coding system with CDI clarification request notification |
| WO2016080332A1 (ja) | 2014-11-19 | 2016-05-26 | 株式会社村田製作所 | コイル部品 |
| US10366687B2 (en) * | 2015-12-10 | 2019-07-30 | Nuance Communications, Inc. | System and methods for adapting neural network acoustic models |
| EP3516560A1 (en) | 2016-09-20 | 2019-07-31 | Nuance Communications, Inc. | Method and system for sequencing medical billing codes |
| US11133091B2 (en) | 2017-07-21 | 2021-09-28 | Nuance Communications, Inc. | Automated analysis system and method |
| US11024424B2 (en) | 2017-10-27 | 2021-06-01 | Nuance Communications, Inc. | Computer assisted coding systems and methods |
| EP3874491B1 (en) | 2018-11-02 | 2024-05-01 | Dolby International AB | Audio encoder and audio decoder |
| CN114245036B (zh) * | 2021-12-21 | 2024-03-12 | 北京达佳互联信息技术有限公司 | 视频制作方法及装置 |
Family Cites Families (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US2011119A (en) * | 1932-12-03 | 1935-08-13 | Rekuperator Gmbh | Method of protecting heating surfaces against overheating |
| US5956674A (en) * | 1995-12-01 | 1999-09-21 | Digital Theater Systems, Inc. | Multi-channel predictive subband audio coder using psychoacoustic adaptive bit allocation in frequency, time and over the multiple channels |
| DE69713779T2 (de) | 1996-09-12 | 2002-10-17 | Univ Bath | Objektorientiertes videosystem |
| EP1613089A1 (en) | 1997-02-14 | 2006-01-04 | The Trustees of Columbia University in the City of New York | Object-based audio-visual terminal and corresponding bitstream structure |
| AU2001275335A1 (en) | 2000-06-06 | 2001-12-17 | Georgia Tech Research Corporation | System and method for object-oriented video processing |
| US20030035553A1 (en) * | 2001-08-10 | 2003-02-20 | Frank Baumgarte | Backwards-compatible perceptual coding of spatial cues |
| US7583805B2 (en) | 2004-02-12 | 2009-09-01 | Agere Systems Inc. | Late reverberation-based synthesis of auditory scenes |
| JP2005086486A (ja) * | 2003-09-09 | 2005-03-31 | Alpine Electronics Inc | オーディオ装置およびオーディオ処理方法 |
| DE102004052296A1 (de) * | 2004-10-27 | 2006-05-04 | Sennheiser Electronic Gmbh & Co. Kg | Sender und Empfänger für ein drahtloses Audio-Übertragungssystem |
| KR100682904B1 (ko) * | 2004-12-01 | 2007-02-15 | 삼성전자주식회사 | 공간 정보를 이용한 다채널 오디오 신호 처리 장치 및 방법 |
| US9626973B2 (en) * | 2005-02-23 | 2017-04-18 | Telefonaktiebolaget L M Ericsson (Publ) | Adaptive bit allocation for multi-channel audio encoding |
| WO2006091139A1 (en) * | 2005-02-23 | 2006-08-31 | Telefonaktiebolaget Lm Ericsson (Publ) | Adaptive bit allocation for multi-channel audio encoding |
| EP2088580B1 (en) * | 2005-07-14 | 2011-09-07 | Koninklijke Philips Electronics N.V. | Audio decoding |
| AU2007212873B2 (en) * | 2006-02-09 | 2010-02-25 | Lg Electronics Inc. | Method for encoding and decoding object-based audio signal and apparatus thereof |
| BRPI0710923A2 (pt) | 2006-09-29 | 2011-05-31 | Lg Electronics Inc | métodos e aparelhagens para codificação e decodificação de sinais de áudio orientados a objeto |
| EP2122612B1 (en) * | 2006-12-07 | 2018-08-15 | LG Electronics Inc. | A method and an apparatus for processing an audio signal |
-
2008
- 2008-01-07 US US12/521,884 patent/US8634577B2/en active Active
- 2008-01-07 BR BRPI0806346-0A patent/BRPI0806346B1/pt active IP Right Grant
- 2008-01-07 MX MX2009007412A patent/MX2009007412A/es active IP Right Grant
- 2008-01-07 EP EP08700207.7A patent/EP2109861B1/en active Active
- 2008-01-07 CN CN2008800020987A patent/CN101578658B/zh active Active
- 2008-01-07 WO PCT/IB2008/050029 patent/WO2008084427A2/en active Application Filing
- 2008-01-07 KR KR1020097016679A patent/KR101443568B1/ko active IP Right Grant
- 2008-01-07 RU RU2009130352/08A patent/RU2466469C2/ru active
- 2008-01-07 TR TR2019/06713T patent/TR201906713T4/tr unknown
- 2008-01-07 JP JP2009545259A patent/JP5455647B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| MX2009007412A (es) | 2009-07-17 |
| JP2010515944A (ja) | 2010-05-13 |
| EP2109861B1 (en) | 2019-03-13 |
| TR201906713T4 (tr) | 2019-05-21 |
| EP2109861A2 (en) | 2009-10-21 |
| BRPI0806346A8 (pt) | 2015-10-13 |
| WO2008084427A2 (en) | 2008-07-17 |
| CN101578658A (zh) | 2009-11-11 |
| KR20090113286A (ko) | 2009-10-29 |
| JP5455647B2 (ja) | 2014-03-26 |
| WO2008084427A3 (en) | 2009-03-12 |
| BRPI0806346A2 (pt) | 2011-09-06 |
| RU2466469C2 (ru) | 2012-11-10 |
| US8634577B2 (en) | 2014-01-21 |
| KR101443568B1 (ko) | 2014-09-23 |
| US20100076774A1 (en) | 2010-03-25 |
| CN101578658B (zh) | 2012-06-20 |
| RU2009130352A (ru) | 2011-02-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| BRPI0806346B1 (pt) | Decodificador de áudio, método para decodificar sinais de áudio, receptor para receber sinais de áudio, sistema de comunicação para comunicar sinais de áudio, métodos para receber sinais de áudio e para transmitir e receber sinais de áudio, e dispositivo de reprodução de áudio | |
| JP4601669B2 (ja) | マルチチャネル信号またはパラメータデータセットを生成する装置および方法 | |
| US8433583B2 (en) | Audio decoding | |
| KR101236259B1 (ko) | 오디오 채널들을 인코딩하는 방법 및 장치 | |
| EP1866912B1 (en) | Multi-channel audio coding | |
| JP5291096B2 (ja) | オーディオ信号処理方法及び装置 | |
| JP5097702B2 (ja) | オーディオエンコード及びデコード | |
| KR101356586B1 (ko) | 다중 채널 오디오 신호를 생성하기 위한 디코더, 수신기 및 방법 | |
| RU2010152580A (ru) | Устройство параметрического стереофонического повышающего микширования, параметрический стереофонический декодер, устройство параметрического стереофонического понижающего микширования, параметрический стереофонический кодер | |
| KR20090018804A (ko) | 리믹싱 성능을 갖는 개선한 오디오 | |
| BRPI0612218B1 (pt) | codificação de áudio residual adaptativa | |
| MX2008012315A (es) | Metodos y aparatos para codificar y descodificar señales de audio basados en objeto. | |
| BRPI0606387B1 (pt) | Decodificador, dispositivo de reprodução de áudio, codificador, dispositivo de gravação, método para gerar um sinal de áudio multicanal, meio de armazenamento, método paracodificar um sinal de áudio multicanal, receptor, transmissor, sistema de transmissão, método de receber um sinal de áudio multicanal, e método de transmitir um sinal deáudio multicanal | |
| RU2455708C2 (ru) | Способы и устройства кодирования и декодирования объектно-ориентированных аудиосигналов | |
| KR100891670B1 (ko) | 신호 처리 방법 및 장치 | |
| KR100891669B1 (ko) | 믹스 신호의 처리 방법 및 장치 | |
| BR122012021663A2 (pt) | Dispositivo de codificação de voz, dispositivo de decodificação de voz, método de codificação de voz, método de decodificação de voz, programa de codificação de voz e programa de decodificação de voz |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| B25D | Requested change of name of applicant approved |
Owner name: KONINKLIJKE PHILIPS N.V. (NL) |
|
| B25G | Requested change of headquarter approved |
Owner name: KONINKLIJKE PHILIPS N.V. (NL) |
|
| B15K | Others concerning applications: alteration of classification |
Ipc: G10L 19/26 (2013.01), G10L 19/008 (2013.01), G10L |
|
| B06F | Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette] | ||
| B06U | Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette] | ||
| B06A | Patent application procedure suspended [chapter 6.1 patent gazette] | ||
| B09A | Decision: intention to grant [chapter 9.1 patent gazette] | ||
| B16A | Patent or certificate of addition of invention granted [chapter 16.1 patent gazette] |
Free format text: PRAZO DE VALIDADE: 10 (DEZ) ANOS CONTADOS A PARTIR DE 29/09/2020, OBSERVADAS AS CONDICOES LEGAIS. |