BR112013020987B1 - Decodificador de fala, codificador de fala, método de decodificação de fala, método decodificação de fala e memórias legíveis por computador. - Google Patents

Decodificador de fala, codificador de fala, método de decodificação de fala, método decodificação de fala e memórias legíveis por computador. Download PDF

Info

Publication number
BR112013020987B1
BR112013020987B1 BR112013020987-9A BR112013020987A BR112013020987B1 BR 112013020987 B1 BR112013020987 B1 BR 112013020987B1 BR 112013020987 A BR112013020987 A BR 112013020987A BR 112013020987 B1 BR112013020987 B1 BR 112013020987B1
Authority
BR
Brazil
Prior art keywords
time envelope
frequency band
time
envelope
high frequency
Prior art date
Application number
BR112013020987-9A
Other languages
English (en)
Other versions
BR112013020987A2 (pt
Inventor
Kei Kikuiri
Atsushi Yamaguchi
Original Assignee
Ntt Docomo, Inc.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ntt Docomo, Inc. filed Critical Ntt Docomo, Inc.
Priority to BR122019027753-2A priority Critical patent/BR122019027753B1/pt
Publication of BR112013020987A2 publication Critical patent/BR112013020987A2/pt
Publication of BR112013020987B1 publication Critical patent/BR112013020987B1/pt

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/038Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/26Pre-filtering or post-filtering
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Processing of the speech or voice signal to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/038Speech enhancement, e.g. noise reduction or echo cancellation using band spreading techniques
    • G10L21/0388Details of processing therefor
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/03Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
    • G10L25/18Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being spectral information of each sub-band
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/03Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
    • G10L25/21Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being power information

Abstract

DECODIFICADOR DE FALA, CODIFICADOR DE FALA, MÉTODO DE DECODIFICAÇÃO DE FALA, MÉTODO DE CODIFICAÇÃO DE FALA, PROGRAMA DE DECODIFICAÇÃO DE FALA, E PROGRAMA DE CODIFICAÇÃO DE FALA. A presente invenção refere-se a um decodificador de fala (1) que inclui uma unidade de desmultiplexação (1a), uma unidade de decodificação de frequência baixa (1b), uma unidade de banco de filtro de divisão de banda (1c), uma unidade de análise de sequência codificada (1d), uma unidade de quantização inversa e decodificação de sequência codificada (1e), uma unidade de geração de alta frequência (1h), unidades de cálculo de envelope de tempo de baixa frequência (1f1 a 1fn) que adquire uma pluralidade de envelopes de tempo de baixa frequência, uma unidade de cálculo de envelope de tempo (1g) que calcula envelopes de tempo de alta frequência utilizando a informação de envelope de tempo e a pluralidade de envelopes de tempo de frequência baixa, uma unidade de ajuste de envelope de tempo (1i) que ajusta o envelope de tempo dos componentes de alta frequência utilizando os envelopes de tempo obtidos pela unidade de cálculo de envelope de tempo (1g), e uma unidade de banco de filtro de síntese de banda (1j).

Description

Campo Técnico
[001] A presente invenção refere-se a um decodificador de fala, um codificador de fala, um método de decodificação de fala, um método de codificação de fala, um programa de decodificação de fala e um programa de codificação de fala.
Antecedentes da Técnica
[002] A tecnologia de codificação de fala e áudio que comprime a quantidade de dados de um sinal para vários décimos pela remoção de informação que não é necessária para a percepção humana utilizando psicologia auditiva é uma tecnologia muito importante na transmissão e acúmulo de sinais. Um exemplo de técnicas de codificação de áudio perceptual amplamente utilizadas em MPEG4 AAC (Codificação de Áudio Avançada) padronizadas por ISO/IEC MPEG (Grupo de Especialistas de Imagem em Movimento).
[003] Adicionalmente, como um método para melhoria do desempenho de codificação de fala e obtenção de alta qualidade de fala em uma baixa taxa de bits, uma tecnologia de extensão de banda que gera componentes de alta frequência utilizando componentes de baixa frequência de fala tem sido amplamente utilizada recentemente. Um exemplo típico da tecnologia de extensão de banda é a tecnologia SBR (Duplicação de Banda Espectral) utilizada em MPEG 4 AAC. Em SBR, depois da geração de componentes de alta frequência pela duplicação de um coeficiente espectral a partir da banda de baixa frequência para banda de alta frequência em um sinal transformado em domínio da frequência por banco QMF (Filtro de Espelho de Quadratura), os componentes de alta frequência são ajustados pelo ajuste do envelope espectral e tonalidade do coeficiente duplicado. O ajuste do envelope espectral e tonalidade é referido doravante como "ajuste de envelope de frequência". O método de codificação de fala utilizando tal tecnologia de extensão de banda pode reproduzir os componentes de alta frequência de um sinal utilizando uma pequena quantidade de informação suplementar apenas, e é eficiente para reduzir a taxa de bits da codificação de fala.
[004] Na tecnologia de extensão de banda no domínio da frequência tal como SBR, pelo ajuste do envelope de frequência para o coeficiente espectral representado no domínio da frequência, existe um caso no qual o ruído reverberante chamado de pré-eco ou pós-eco é percebido em um sinal decodificado quando um sinal de áudio com grandes variações em envelope de tempo tal como um sinal de fala, um som de palmas ou um som de castanhola é codificado. Esse problema ocorre visto que o envelope de tempo de componentes de alta frequência é deformado no processo de ajuste e, em muitos casos, se torna um formato mais plano do que antes do ajuste. O envelope de tempo de componentes de alta frequência que se torna plano como resultado do ajuste não coincide com o envelope de tempo de componentes de alta frequência no sinal original antes da codificação e causa pré-eco ou pós-eco.
[005] Como uma solução para esse problema, o método a seguir é conhecido (vide literatura de patente 1). Especificamente, o método adquire a energia dos componentes de baixa frequência para cada partição de tempo de um sinal de domínio da frequência, extrai a informação de envelope de tempo da energia adquirida e sobrepõe a informação de envelope de tempo extraída nos componentes de alta frequência que foram ajustados utilizando uma informação suplementar e então processa para ajustar o envelope de frequência. Esse método é referido doravante como "método de deformação de envelope de tempo". É, dessa forma, possível se ajustar o envelope de tempo de um sinal decodificado em um formato menos distorcido e obter um sinal reproduzido com menos pré-eco e pós-eco.
Lista de Citação Literatura de Patente
[006] PTL 1: WO/2010/114123
Sumário da Invenção Problema Técnico
[007] No método de deformação de envelope de tempo descrito na Literatura de Patente 1 descrita acima, depois de o sinal decodificado que contém apenas componentes de baixa frequência obtidos com base em uma sequência de bits multiplexada de entrada ser obtidos, um sinal no domínio QMF é obtido a partir do sinal decodificado. Adicionalmente, a informação de envelope de tempo é adquirida a partir do sinal no domínio QMF, a informação de envelope de tempo é ajustada utilizando um parâmetro e então o processamento da deformação de envelope de tempo é realizado nos componentes de alta frequência do sinal no domínio QMF utilizando a informação de envelope de tempo ajustada.
[008] No entanto, no método descrito acima da deformação de envelope de tempo, visto que o processamento da deformação de envelope de tempo é realizada utilizando-se uma informação de envelope de tempo que é uma função do tempo obtido a partir dos componentes de baixa frequência do sinal no domínio QMF, é difícil se ajustar a forma de onda do envelope de tempo quando a correlação entre o envelope de tempo dos componentes de baixa frequência e o envelope de tempo dos componentes de alta frequência não é suficiente. Como resultado disso, o pré-eco e pós-eco no sinal decodificado não podem ser suficientemente reduzidos em muitos casos.
[009] A presente invenção foi realizada para solucionar os problemas acima e um objetivo da presente invenção é, dessa forma, fornecer um decodificador de fala, um codificador de fala, um método de decodificação de fala, um método de codificação de fala, um programa de decodificação de fala, e um programa de codificação de fala que possam ajustar o envelope de tempo de um sinal decodificado em um formato menos distorcido e, dessa forma, obter um sinal reproduzido no qual pré-eco e pós-eco são suficientemente reduzidos.
Solução para o Problema
[010] Para se solucionar o problema acima, um decodificador de acordo com um aspecto da invenção é um decodificador de fala que decodifica uma sequência codificada gerada pela codificação de um sinal de fala, incluindo meios de demultiplexação para demultiplexar a sequência codificada em uma sequência codificada de baixa frequência e uma sequência codificada em alta frequência; meios de decodificação de baixa frequência para decodificar a sequência codificada de baixa frequência demultiplexada pelos meios de demultiplexação e obtenção de um sinal de frequência baixa; meios de transformação de frequência para transformação do sinal de baixa frequência obtido pelos meios de decodificação de baixa frequência em um domínio da frequência; meios de análise de sequência codificada de alta frequência para análise de sequência codificada de alta frequência demultiplexada pelos meios de demultiplexação e adquirindo informação suplementar codificada para a geração de alta frequência e informação de envelope de tempo; meios de decodificação de sequência codificada e quantização inversa para decodificação e quantização inversa da informação suplementar para geração de alta frequência e informação de envelope de tempo adquirida pelos meios de análise de sequência codificada de alta frequência; meios de geração de alta frequência para geração dos componentes de alta frequência, no domínio da frequência do sinal de fala a partir do sinal de baixa frequência transformado no domínio da frequência pelos meios de transformação de frequência utilizando a informação suplementar para geração de alta frequência decodificada pelos meios de quantização inversa e decodificação de sequência codificada; primeiros a N- ésimos (N é um inteiro igual a ou maior do que dois) meios de cálculo de envelope de tempo de baixa frequência para analisar o sinal de baixa frequência transformado em domínio da frequência pelos meios de transformação de frequência e adquirindo uma pluralidade de envelopes de tempo de baixa frequência; meios de cálculo de envelope de tempo para calcular um envelope de tempo de frequência alta utilizando a informação de envelope de tempo adquirida pelos meios de quantização inversa e decodificação de sequência codificada e a pluralidade de envelopes de tempo de baixa frequência adquiridos pelos meios de cálculo de envelope de tempo de baixa frequência, meios de ajuste de envelope de tempo para ajuste de um envelope de tempo dos componentes de alta frequência gerados pelos meios de geração de alta frequência utilizando o envelope de tempo adquirido pelos meios de cálculo de envelope de tempo; e meios de transformação de frequência inversa para adicionar os componentes de alta frequência ajustados pelos meios de ajuste de envelope de tempo e o sinal de frequência baixa decodificado pelos meios de decodificação de frequência baixa juntos e enviando um sinal de domínio do tempo contendo componentes de frequência inteiros.
[011] Um decodificador de acordo com outro aspecto da invenção é um decodificador de fala que decodifica uma sequência codificada gerada pela codificação de um sinal de fala, incluindo meios de demultiplexação para demultiplexar a sequência codificada em uma sequência codificada de baixa frequência e uma sequência codificada de alta frequência; os meios de decodificação de baixa frequência para decodificação da sequência codificada de baixa frequência demultiplexada pelos meios de demultiplexação e obtendo de um sinal de frequência baixa; meios de transformação de frequência para transformar o sinal de baixa frequência obtido pelos meios de decodificação de baixa frequência em um domínio da frequência; meios de análise de sequência codificada de alta frequência para análise de sequência codificada de alta frequência demultiplexada pelos meios de demultiplexação e obtenção de um sinal de frequência baixa; meios de transformação de frequência para transformar o sinal de baixa frequência obtido pelos meios de decodificação de baixa frequência em um domínio da frequência; meios de análise de sequência codificada de alta frequência para analisar a sequência codificada de alta frequência demultiplexada pelos meios de demultiplexação e aquisição de informação suplementar codificada para geração de alta frequência, informação de envelope de frequência, e informação de envelope de tempo; meios de quantização inversa e decodificação de sequência codificada para decodificar e quantificar de forma inversa a informação de envelope, e a informação de envelope de tempo adquirida pelos meios de análise de sequência codificada de alta frequência; meios de geração de alta frequência para a geração de componentes de alta frequência no domínio da frequência do sinal de fala a partir do sinal de baixa frequência transformado no domínio da frequência pelos meios de transformação de frequência utilizando informação suplementar para a geração de alta frequência decodificada pelos meios de quantização inversa e decodificação de sequência codificada; primeiros a N-ésimos (N é um inteiro igual a ou maior do que dois) meios de cálculo de envelope de tempo de frequência baixa pelos meios de transformação de frequência e aquisição de uma pluralidade de envelopes de tempo de baixa frequência; meios de cálculo de envelope de tempo para calcular um envelope de tempo de alta frequência utilizando a informação de envelope de tempo adquirida pelos meios de quantização inversa e decodificação de sequência codificada e a pluralidade de envelopes de tempo de baixa frequência adquiridos pelos meios de cálculo de envelope de tempo de baixa frequência, meios de sobreposição de envelope de frequência para sobrepor a informação de envelope de frequência adquirida pelos meios de quantização inversa e decodificação de sequência codificada no envelope de tempo de frequência alta e adquirindo um envelope de frequência e tempo; os meios de ajuste de envelope de frequência e tempo para ajustar um envelope de tempo e um envelope de frequência dos componentes de frequência alta gerados pelos meios de geração de frequência alta utilizando o envelope de tempo adquirido pelos meios de cálculo de envelope de tempo e o envelope de frequência e tempo adquirido pelos meios de sobreposição de envelope de frequência; e meios de transformação de frequência inversa para adicionar os componentes de alta frequência ajustados pelos meios de ajuste de envelope de frequência e tempo e o sinal de baixa frequência decodificado pelos meios de decodificação de baixa frequência juntos e enviando um sinal de domínio do tempo contendo componentes de frequência inteiros.
[012] Um decodificador de acordo com outro aspecto da invenção é um decodificador de fala que decodifica uma sequência codificada gerada pela codificação de um sinal de fala, incluindo meios de demultiplexação para demultiplexar a sequência codificada em uma sequência codificada de baixa frequência e uma sequência codificada de alta frequência; os meios de decodificação de baixa frequência para decodificação da sequência codificada de baixa frequência demultiplexada pelos meios de demultiplexação e obtendo um sinal de baixa frequência; os meios de transformação de frequência para transformar o sinal de baixa frequência obtido pelos meios de decodificação de baixa frequência em um domínio da frequência; os meios de análise de sequência codificada de alta frequência para analisar a sequência codificada de alta frequência demultiplexada pelos meios de demultiplexação e adquirindo a informação suplementar codificada para geração de alta frequência, informação de envelope de frequência e informação de envelope de tempo; meios de quantização inversa e decodificação de sequência codificada para decodificar e quantizar de forma inversa a informação suplementar para geração de alta frequência, a informação de envelope de frequência, e a informação de envelope de tempo adquiridas pelos meios de análise de sequência codificada de alta frequência; meios de geração de alta frequência para geração de componentes de alta frequência no domínio da frequência do sinal de fala a partir do sinal de baixa frequência transformada no domínio da frequência pelos meios de transformação de frequência utilizando a informação suplementar para geração de alta frequência decodificada pelos meios de quantização inversa e decodificação de sequência codificada; primeiros a N-ésimos (N é um inteiro igual a ou maior do que dois) meios de cálculo de envelope de tempo de baixa frequência para analisar o sinal de baixa frequência transformado em domínio da frequência pelos meios de transformação de frequência e aquisição de uma pluralidade de envelopes de tempo de baixa frequência; os meios de cálculo de envelope de tempo para calcular um envelope de tempo de alta frequência utilizando a informação de envelope de tempo adquirida pelos meios de quantização inversa e decodificação de sequência codificada e a pluralidade de envelopes de tempo de baixa frequência adquiridos pelos meios de cálculo de envelope de tempo de baixa frequência; os meios de cálculo de envelope de frequência para calcular um envelope de frequência utilizando a informação de envelope de frequência adquirida pelos meios de quantização inversa e decodificação de sequência codificada; os meios de ajuste de envelope de frequência e tempo para ajustar um envelope de tempo e um envelope de frequência dos componentes de alta frequência gerados pelos meios de geração de alta frequência utilizando o envelope de frequência de tempo pelos meios de cálculo de envelope de tempo e o envelope de frequência adquirido pelos meios de cálculo de envelope de frequência; e meios de transformação de frequência inversa para adição de componentes de alta frequência ajustados pelos meios de ajuste de envelope de frequência e tempo e o sinal de baixa frequência decodificado pelos meios de decodificação de baixa frequência juntos e enviando um sinal de domínio do tempo contendo componentes de frequência inteiros.
[013] Um método de decodificação de acordo com um aspecto da invenção é um método de decodificação de fala de decodificação de uma sequência codificada gerada pela codificação de um sinal de fala, incluindo a etapa de demultiplexação pelos meios de demultiplexação, da demultiplexação da sequência codificada em uma sequência codificada de baixa frequência e uma sequência codificada de alta frequência; etapa de decodificação de baixa frequência pelos meios de decodificação de baixa frequência, de decodificação de sequência codificada de baixa frequência demultiplexada pelos meios de demultiplexação e obtenção de um sinal de baixa frequência; etapa de transformação de frequência pelos meios de transformação de frequência, de transformação do sinal de baixa frequência obtido pelos meios de decodificação de baixa frequência em um domínio da frequência; etapa de análise de sequência codificada de alta frequência pelos meios de análise de sequência codificada de alta frequência, de análise de sequência codificada de alta frequência demultiplexada pelos meios de demultiplexação e aquisição de informação suplementar codificada para geração de alta frequência e informação de envelope de tempo; etapa de quantização inversa e decodificação de sequência codificada pelos meios de quantização inversa e decodificação de sequência codificada, de decodificação e quantização inversa de informação suplementar para geração de alta frequência e informação de envelope de tempo adquirida pelos meios de análise de sequência codificada de alta frequência; etapa de geração de alta frequência pelos meios de geração de alta frequência, de geração de componentes de alta frequência no domínio da frequência do sinal de fala a partir do sinal de baixa frequência transformado no domínio da frequência pelos meios de transformação de frequência utilizando informação suplementar para a geração de alta frequência decodificada pelos meios de quantização inversa e decodificação de sequência codificada, primeira e N-ésima (N é um inteiro igual a ou maior do que dois) etapas de cálculo de envelope de tempo de baixa frequência, pelos primeiros a N-ésimos meios de cálculo de envelope de tempo de baixa frequência, de análise de um sinal de baixa frequência transformado em domínio da frequência pelos meios de transformação de frequência e aquisição de uma pluralidade de envelopes de tempo de baixa frequência; a etapa de cálculo de envelope de tempo pelos meios de cálculo de envelope de tempo do cálculo de um envelope de tempo de alta frequência utilizando a informação de envelope de tempo adquirida pelos meios de quantização inversa e decodificação de sequência codificada e a pluralidade de envelopes de tempo de baixa frequência adquiridos pelos meios de cálculo de envelope de tempo de baixa frequência, a etapa de ajuste de envelope de tempo pelos meios de ajuste de envelope de tempo, do ajuste de um envelope de tempo dos componentes de alta frequência gerados pelos meios de geração de alta frequência utilizando o envelope de tempo adquirido pelos meios de cálculo de envelope de tempo; e a etapa de transformação de frequência inversa pelos meios de transformação de frequência inversa, de adição dos componentes de alta frequência ajustados pelos meios de ajuste de envelope de tempo e o sinal de baixa frequência decodificado pelos meios de decodificação de baixa frequência juntos e enviando um sinal de domínio do tempo contendo componentes de frequência inteiros.
[014] Um método de decodificação de acordo com outro aspecto da invenção é um método de decodificação de fala de decodificação de uma sequência codificada gerada pela codificação de um sinal de fala, incluindo a etapa de demultiplexação pelos meios de demultiplexação da demultiplexação da sequência codificada em uma sequência codificada de baixa frequência e uma sequência codificada de alta frequência; a etapa de decodificação de baixa frequência pelos meios de decodificação de baixa frequência, de decodificação da sequência codificada de baixa frequência demultiplexada pelos meios de demultiplexação e obtenção de um sinal de baixa frequência; a etapa de transformação de frequência pelos meios de transformação de frequência, da transformação de sinal de baixa frequência obtido pelos meios de decodificação de baixa frequência em um domínio da frequência; etapa de análise de sequência codificada de alta frequência, pelos meios de análise de sequência codificada de alta frequência, da análise de sequência codificada de alta frequência demultiplexada pelos meios de demultiplexação e aquisição da informação suplementar codificada para a geração de alta frequência, informação de envelope de frequência, e informação de envelope de tempo; etapa de quantização inversa e decodificação de sequência codificada pelos meios de quantização inversa e decodificação de sequência, da decodificação e quantização inversa da informação suplementar para geração de alta frequência, a informação de envelope de frequência, e a informação de envelope de tempo adquirida pelos meios de análise de sequência codificada de alta frequência; etapa de geração de alta frequência, pelos meios de geração de alta frequência, de geração de componentes de alta frequência no domínio da frequência do sinal de fala a partir do sinal de baixa frequência transformado no domínio da frequência pelos meios de transformação de frequência utilizando a informação suplementar para geração de alta frequência decodificada pelos meios de quantização inversa e decodificação de sequência codificada; primeira a N-ésima (N é um inteiro igual a ou maior do que dois) etapas de cálculo de envelope de tempo de baixa frequência, pelos primeiros a N-ésimos meios de cálculo de envelope de tempo de baixa frequência, de análise de sinal de baixa frequência transformada no domínio da frequência pelos meios de transformação de frequência e adquirindo uma pluralidade de envelopes de tempo de baixa frequência; etapa de cálculo de envelope de tempo, pelos meios de cálculo de envelope de tempo, do cálculo de envelope de tempo de alta frequência utilizando a informação de envelope de tempo adquirida pelos meios de quantização inversa e decodificação de sequência codificada e a pluralidade de envelopes de tempo de baixa frequência adquiridos pelos meios de cálculo de envelope de tempo de baixa frequência; etapa de sobreposição de envelope de frequência, pelos meios de sobreposição de envelope de frequência, as sobreposição da informação de envelope de frequência adquirida pelos meios de quantização inversa e decodificação de sequência codificada no envelope de tempo de alta frequência e aquisição de um envelope de frequência e tempo; etapa de ajuste de envelope de frequência e tempo, pelos meios de ajuste de envelope de frequência e tempo, de ajuste de um envelope de tempo e um envelope de frequência dos componentes de alta frequência gerados pelos meios de geração de alta frequência utilizando o envelope de tempo adquirido pelos meios de cálculo de envelope de tempo e o envelope de frequência e tempo adquirido pelos meios de sobreposição de envelope de frequência; e etapa de transformação de frequência inversa, pelos meios de transformação de frequência inversa, de adição de componentes de alta frequência ajustados pelos meios de ajuste de envelope de frequência e tempo e o sinal de baixa frequência decodificado pelos meios de decodificação de baixa frequência juntos e enviando um sinal de domínio do tempo contendo componentes de frequência inteiros.
[015] Um método de decodificação de acordo com outro aspecto da invenção é um método de decodificação de fala de decodificação de uma sequência codificada gerada pela codificação de um sinal de fala, incluindo a etapa de demultiplexação, pelos meios de demultiplexação, da demultiplexação da sequência codificada em uma sequência codificada de baixa frequência e uma sequência codificada de alta frequência; a etapa de decodificação de baixa frequência, pelos meios de decodificação de baixa frequência, da decodificação de sequência codificada de baixa frequência demultiplexada pelos meios de demultiplexação e obtenção de um sinal de baixa frequência; etapa de transformação de frequência, pelos meios de transformação de frequência, de transformação de sinal de baixa frequência obtido pelos meios de decodificação de baixa frequência em um domínio da frequência; etapa de análise de sequência codificada de alta frequência, pelos meios de análise de sequência codificada de alta frequência, da análise da sequência codificada de alta frequência demultiplexada pelos meios de demultiplexação e aquisição de informação suplementar codificada para a geração de alta frequência, informação de envelope de frequência e informação de envelope de tempo; etapa de quantização inversa e decodificação de sequência codificada; pelos meios de quantização inversa e decodificação de sequência codificada, de decodificação e quantização inversa da informação suplementar para a geração de alta frequência, informação de envelope de frequência e informação de envelope de tempo adquiridas pelos meios de análise de sequência codificada de alta frequência; a etapa de geração de alta frequência, meios de geração de alta frequência, de geração de componentes de frequência alta no domínio da frequência do sinal de fala a partir do sinal de frequência baixa transformado em um domínio da frequência pelos meios de transformação de frequência utilizando a informação suplementar para a geração de alta frequência decodificada pelos meios de quantização inversa e decodificação de sequência codificada; primeira a N-ésima (N é um inteiro igual a ou maior do que dois) etapas de cálculo de envelope de tempo de baixa frequência, pelos primeiros a N-ésimos meios de cálculo de envelope de tempo de baixa frequência, da análise de sinal de baixa frequência transformado em domínio da frequência pelos meios de transformação de frequência e aquisição de uma pluralidade de envelopes de tempo de baixa frequência; a etapa de cálculo de envelope de tempo, pelos meios de cálculo de envelope de tempo, do cálculo de um envelope de tempo de alta frequência utilizando a informação de envelope de tempo adquirida pelos meios de quantização inversa e decodificação de sequência codificada e a pluralidade de envelopes de tempo de frequência baixa adquiridos pelos meios de cálculo de envelope de tempo de frequência baixa; etapa de cálculo de envelope de frequência, pelos meios de cálculo de envelope de frequência, do cálculo de um envelope de frequência utilizando a informação de envelope de frequência adquirida pelos meios de quantização inversa e decodificação de sequência codificada; etapa de ajuste de envelope de frequência e tempo, pelos meios de ajuste de envelope de frequência e tempo, do ajuste de um envelope de tempo e um envelope de frequência dos componentes de alta frequência gerados pelos meios de geração de alta frequência utilizando o envelope de tempo adquirido pelos meios de cálculo de envelope de tempo e o envelope de frequência adquirido pelos meios de cálculo de envelope de frequência; e a etapa de transformação de frequência inversa, pelos meios de transformação de frequência inversa, de soma de componentes de frequência alta ajustados pelos meios de ajuste de envelope de frequência e tempo e o sinal de baixa frequência decodificado pelos meios de decodificação de baixa frequência juntos e enviando um sinal de domínio do tempo contendo componentes de frequência inteiros.
[016] Um programa de decodificação de acordo com um aspecto da invenção é um programa de decodificação de fala que decodifica uma sequência codificada gerada pela codificação de um sinal de fala, o programa fazendo com que um computador funcione como meios de demultiplexação para demultiplexar a sequência codificada em uma sequência codificada de frequência baixa e uma sequência codificada de alta frequência; meios de decodificação de baixa frequência para decodificar a sequência codificada de baixa frequência demultiplexada pelos meios de demultiplexação e obtendo um sinal de baixa frequência; meios de transformação de frequência para transformar o sinal de baixa frequência obtido pelos meios de decodificação de baixa frequência em um domínio da frequência; meios de análise de sequência codificado de alta frequência para analisar a sequência codificada de alta frequência demultiplexada pelos meios de demultiplexação e aquisição de informação suplementar codificada para a geração de alta frequência e informação de envelope de tempo; meios de quantização inversa e decodificação de sequência codificada para decodificação e quantização inversa da informação suplementar para a geração de alta frequência e a informação de envelope de tempo adquirida pelos meios de análise de sequência codificada de frequência alta; meios de geração de frequência alta para geração de componentes de alta frequência no domínio da frequência do sinal de fala a partir do sinal de baixa frequência transformada em domínio da frequência pelos meios de transformação de frequência utilizando a informação suplementar para geração de alta frequência decodifica pelos meios de quantização inversa e decodificação de sequência codificada; primeiros a N-ésimos (N é um inteiro igual a ou maior do que dois) meios de cálculo de envelope de tempo de baixa frequência para analisar o sinal de baixa frequência transformada no domínio da frequência pelos meios de transformação de frequência e aquisição de uma pluralidade de envelopes de tempo de baixa de frequência; os meios de cálculo de envelope de tempo para calcular um envelope de tempo de alta frequência utilizando a informação de envelope de tempo adquirida pelos meios de quantização inversa e decodificação de sequência codificada e a pluralidade de envelopes de tempo de baixa frequência adquiridos pelos meios de cálculo de envelope de tempo de baixa frequência; meios de ajuste de envelope de tempo para ajustar um envelope de tempo dos componentes de frequência alta gerados pelos meios de geração de alta frequência utilizando o envelope de tempo adquirido pelos meios de cálculo de envelope de tempo; e meios de transformação de frequência inversa para adicionar os componentes de alta frequência ajustados pelos meios de ajuste de envelope de tempo e o sinal de frequência baixo decodificado pelos meios de decodificação de frequência baixa juntos e enviando um sinal de domínio do tempo contendo componentes de frequência inteiros.
[017] Um programa de decodificação de acordo com outro aspecto da invenção é uma programação de decodificação de fala que decodifica uma sequência codificada gerada pela codificação de um sinal de fala, o programa fazendo com que um computador funcione como meios de demultiplexação para demultiplexar a sequência codificada em uma sequência codificada de baixa frequência e uma sequência codificada de alta frequência; os meios de decodificação de baixa frequência para decodificação de sequência codificada de baixa frequência demultiplexada pelos meios de demultiplexação e obtenção de um sinal de baixa frequência; os meios de transformação de frequência para transformar o sinal de baixa frequência obtido pelos meios de decodificação de baixa frequência em um domínio da frequência; os meios de análise de sequência codificada de alta frequência para analisar a sequência codificada de alta frequência demultiplexada pelos meios de demultiplexação e aquisição de informação suplementar codificada para geração de alta frequência, informação de envelope de frequência, e informação de envelope de tempo; meios de quantização inversa e decodificação de sequência codificada para decodificação e quantização inversa da informação suplementar para geração de alta frequência, a informação de envelope de frequência, e a informação de envelope de tempo adquirida pelos meios de análise de sequência codificada de alta frequência meios de geração de alta frequência para geração de componentes de alta frequência no domínio da frequência do sinal de fala a partir do sinal de frequência baixa transformado em domínio da frequência pelos meios de transformação de frequência utilizando a informação suplementar para a geração de alta frequência decodificada pelos meios de quantização inversa e decodificação de sequência codificada; primeiros a N-ésimos (N é um inteiro igual a ou maior do que dois) meios de cálculo de envelope de tempo de baixa frequência para analisar o sinal de baixa frequência transformado no domínio da frequência pelos meios de transformação de frequência e aquisição de uma pluralidade de envelopes de tempo de baixa frequência; os meios de cálculo de envelope de tempo para calcular um envelope de tempo de alta frequência utilizando a informação de envelope de tempo adquirida pelos meios de quantização inversa e decodificação de sequência codificada e a pluralidade de envelopes de tempo de baixa frequência adquiridos pelos meios de cálculo de envelope de tempo de baixa frequência; meios para sobreposição de envelope de frequência para sobrepor a informação de envelope de frequência adquirida pelos meios de quantização inversa e decodificação de sequência codificada no envelope de tempo de alta frequência e aquisição de um envelope de tempo e frequência; os meios de ajuste de envelope de tempo e frequência para ajustar um envelope de tempo e um envelope de frequência dos componentes de alta frequência gerados pelos meios de geração de alta frequência utilizando o envelope de tempo adquirido pelos meios de cálculo de envelope de tempo e o envelope de tempo e frequência adquirido pelos meios de sobreposição de envelope de frequência; e os meios de transformação de frequência inversa para adicionar os componentes de frequência alta ajustados pelos meios de ajuste de envelope de tempo e frequência e o sinal de baixa frequência decodificado pelos meios de decodificação de baixa frequência juntos e enviando um sinal de domínio do tempo contendo componentes de frequência inteiros.
[018] Um programa de decodificação de acordo com outro aspecto da invenção é um programa de decodificação de fala que decodifica uma sequência codificada gerada pela codificação de um sinal de fala, o programa fazendo com que um computador funcione como meios de demultiplexação para demultiplexar a sequência codificada em uma sequência codificada de baixa frequência e uma sequência codificada de alta frequência; os meios de decodificação de baixa frequência para decodificação de sequência codificada de baixa frequência demultiplexada pelos meios de demultiplexação e obtenção de um sinal de frequência baixa; os meios de transformação de frequência para transformar o sinal de frequência baixa obtido pelos meios de decodificação de baixa frequência em um domínio da frequência; os meios de análise de sequência de codificada de alta frequência para analisar a sequência codificada de alta frequência demultiplexada pelos meios de demultiplexação e aquisição de informação suplementar codificada para geração de alta frequência, informação de envelope de frequência e informação de envelope de tempo; meios de quantização inversa e decodificação de sequência codificada para decodificar a quantizar de forma inversa a informação suplementar para geração de alta frequência, informação de envelope de frequência, e informação de envelope de tempo adquirida pelos meios de análise de sequência codificada de alta frequência, meios de geração de alta frequência para gerar componentes de alta frequência no domínio da frequência do sinal de fala a partir do sinal de baixa frequência transformado em domínio da frequência pelos meios de transformação de frequência utilizando a informação suplementar para geração de alta frequência decodificada pelos meios de quantização inversa e decodificação de sequência codificada; primeiros e N-ésimos meios de cálculo de envelope de tempo de baixa frequência (N é um inteiro igual a ou maior do que dois) para análise do sinal de baixa frequência transformado em domínio da frequência pelos meios de transformação de frequência e aquisição de uma pluralidade de envelopes de tempo de baixa frequência; os meios de cálculo de envelope de tempo para calcular um envelope de tempo de alta frequência utilizando a informação de envelope de tempo adquirida pelos meios de quantização inversa e decodificação de sequência codificada e a pluralidade de envelopes de tempo de baixa frequência adquiridos pelos meios de cálculo de envelope de tempo de baixa frequência; os meios de cálculo de envelope de frequência para calcular um envelope de frequência utilizando a informação de envelope de frequência adquirida pelos meios de quantização inversa e decodificação de sequência codificada; os meios de ajuste de envelope de frequência e tempo para ajustar um envelope de tempo e um envelope de frequência dos componentes de alta frequência gerados pelos meios de geração de alta frequência utilizando o envelope de tempo adquirido pelos meios de cálculo de envelope de tempo e o envelope de frequência adquirido pelos meios de cálculo de envelope de frequência; e os meios de transformação de frequência inversa para adicionar os componentes de alta frequência ajustados pelos meios de ajuste de envelope de tempo e frequência e o sinal de baixa frequência decodificado pelos meios de decodificação de baixa frequência juntos e enviando um sinal de domínio do tempo contendo componentes de frequência inteiros.
[019] De acordo com o decodificador, o método de decodificação ou o programa de decodificação descritos acima, o sinal de baixa frequência é obtido partir da sequência codificada pela demultiplexação e decodificação, e a informação suplementar para geração de alta frequência e a informação de envelope de tempo são obtidas a partir da sequência codificada pela demultiplexação, decodificação e quantização inversa. Então, os componentes de alta frequência no domínio da frequência são gerados a partir do sinal de baixa frequência transformado em domínio da frequência utilizando a informação suplementar para geração de alta frequência, e, por outro lado, após a aquisição de uma pluralidade de envelopes de tempo de baixa frequência pela análise de sinal de baixa frequência no domínio da frequência, o envelope de tempo de alta frequência é calculado utilizando-se a pluralidade de envelopes de tempo de baixa frequência e a informação de envelope de tempo. Adicionalmente, o envelope de tempo dos componentes de alta frequência é ajustado pelo envelope de tempo de alta frequência calculado, e os componentes de alta frequência ajustados e o sinal de baixa frequência são adicionados e, dessa forma, o sinal de domínio do tempo é enviado. Dessa forma, visto que uma pluralidade de envelopes de tempo de baixa frequência são utilizados para ajuste do envelope de tempo dos componentes de alta frequência, a forma de onda do envelope de tempo dos componentes de alta frequência é ajustada com alta precisão pelo uso de correlação entre os envelopes de tempo de componentes de baixa frequência e o envelope de tempo de componentes de alta frequência. Como resultado disso, o envelope de tempo no sinal decodificado é ajustado em um formato menos distorcido, e, portanto, um sinal reproduzido no qual pré-eco e pós-eco são suficientemente reduzidos pode ser obtido.
[020] É preferível que o decodificador de fala inclua, adicionalmente, meios de controle de cálculo de envelope de tempo para controlar pelo menos um dentre um cálculo de envelopes de tempo de baixa frequência nos primeiros a N-ésimos meios de cálculo de envelope de tempo de baixa frequência e cálculo do envelope de tempo de alta frequência nos meios de cálculo de envelope de tempo utilizando o sinal de frequência baixa transformado em domínio da frequência pelos meios de transformação de frequência. Com os meios de controle de cálculo de envelope de tempo, é possível se omitir o cálculo de envelopes de tempo de baixa frequência ou o cálculo do envelope de tempo de alta frequência de acordo com a propriedade tal como energia do sinal de baixa frequência, reduzindo, assim, a quantidade de computação.
[021] É preferível também que o decodificador de fala inclua adicionalmente os meios de controle de cálculo de envelope de tempo para controlar pelo menos um dentre o cálculo dos envelopes de tempo de baixa frequência nos primeiros a N-ésimos meios de cálculo de envelope de tempo de baixa frequência e o cálculo do envelope de tempo de alta frequência nos meios de cálculo de envelope de tempo utilizando a informação de envelope de tempo adquirida pelos meios de quantização inversa e decodificação de sequência codificada. Com os meios de controle de cálculo de envelope de tempo, é possível se omitir o cálculo dos envelopes de tempo de baixa frequência ou cálculo do envelope de tempo de alta frequência de acordo com a informação de envelope de tempo obtida a partir da sequência codificada, reduzindo, assim, a quantidade de computação.
[022] É preferido também que o decodificador de fala inclua adicionalmente os meios de controle de cálculo de envelope de tempo para controlar pelo menos um dentre o cálculo de envelopes de tempo de baixa frequência nos primeiros a N-ésimos meios de cálculo de envelope de tempo de baixa frequência e cálculo de envelope de tempo de alta frequência nos meios de cálculo de envelope de tempo utilizando a informação de envelope de tempo adquirida pelos meios de quantização inversa e decodificação de sequência codificada. Com os meios de controle de cálculo de envelope de tempo, é possível se omitir o cálculo dos envelopes de tempo de baixa frequência ou cálculo do envelope de tempo de alta frequência de acordo com a informação de envelope de tempo obtida a partir da sequência codificada, reduzindo, assim, a quantidade de computação.
[023] É preferido, também, que os meios de análise de sequência codificada de alta frequência adquira adicionalmente a informação de controle de cálculo de envelope de tempo, e o decodificador de fala inclua adicionalmente os meios de controle de cálculo de envelope de tempo para controlar pelo menos um dentre o cálculo dos envelopes de tempo de baixa frequência nos primeiros a N-ésimos meios de cálculo de envelope de tempo de baixa frequência e o cálculo do envelope de tempo de alta frequência nos meios de cálculo de envelope de tempo utilizando a informação de controle de cálculo de envelope de tempo adquirida pelos meios de análise de sequência codificada de alta frequência. Nessa configuração, é possível se omitir o cálculo dos envelopes de tempo de baixa frequência ou cálculo de envelope de tempo de alta frequência de acordo com a informação de controle de cálculo de envelope de tempo obtida a partir da sequência codificada, reduzindo, assim, a quantidade de computação.
[024] É preferível também que os meios de análise de sequência codificada de alta frequência adquiram adicionalmente informação de controle de cálculo de envelope de tempo, os meios de quantização inversa e decodificação de sequência codificada adquirindo adicionalmente a segunda informação de envelope de frequência, e o decodificador de fala incluindo adicionalmente os meios de controle de cálculo de envelope de tempo para determinar, com base na informação de controle de cálculo de envelope de tempo, se ajusta o envelope de frequência dos componentes de alta frequência com base na segunda informação de envelope de frequência e, quando da determinação de ajustar o envelope de frequência, o controle da não realização do cálculo dos envelopes de tempo de baixa frequência nos primeiros a N-ésimos meios de cálculo de envelope de tempo de baixa frequência e o cálculo do envelope de tempo de alta frequência nos meios de cálculo de envelope de tempo. Nesse caso, também, é possível se omitir o cálculo dos envelopes de tempo de baixa frequência ou cálculo do envelope de tempo de alta frequência de acordo com a informação de controle de cálculo de envelope de tempo obtida a partir da sequência codificada, reduzindo, assim, a quantidade de computação.
[025] É preferido também que os meios de ajuste de envelope de frequência e tempo processem os componentes de alta frequência do sinal de fala gerado pelos meios de geração de alta frequência com base em uma função especificada. É preferido também que os meios de cálculo de envelope de tempo de baixa frequência processem a pluralidade adquirida de envelopes de tempo de baixa frequência com base em uma função especificada.
[026] Adicionalmente, um codificador de acordo com um aspecto da invenção é um codificador de fala que codifica um sinal de fala; incluindo meios de transformação de frequência para transformar o sinal de fala em um domínio da frequência; meios de subamostragem para subamostrar o sinal de fala e adquirir um sinal de frequência baixa; meios de codificação de baixa frequência para codificar o sinal de baixa frequência adquirido pelos meios de subamostragem; primeiros a N-ésimos (N é um inteiro igual a ou maior do que dois) meios de cálculo de envelope de tempo de baixa frequência para calcular uma pluralidade de envelopes de tempo de componentes de baixa frequência do sinal de fala transformados em domínio da frequência pelos meios de transformação de frequência; meios de cálculo de informação de envelope de tempo para calcular a informação de envelope de tempo necessária para adquirir um envelope de tempo dos componentes de alta frequência do sinal de fala transformado pelos meios de transformação de frequência utilizando os envelopes de tempo dos componentes de baixa frequência calculados pelos primeiros a N-ésimos meios de cálculo de envelope de tempo de baixa frequência; meios de cálculo de informação suplementar para analisar o sinal de fala e calcular a informação suplementar para geração de alta frequência a ser utilizada para gerar componentes de alta frequência a partir do sinal de frequência baixo; meios de quantização e codificação para quantizar e codificar a informação complementar para geração de alta frequência gerada pelos meios de cálculo de informação suplementar e informação de envelope de tempo calculada pelos meios de cálculo de informação de envelope de tempo; meios de construção de sequência codificada para construir uma sequência codificada de alta frequência a partir da informação suplementar para geração de alta frequência e informação de envelope de tempo quantizada e codificada pelos meios de quantização e codificação; e meios de multiplexação para gerar uma sequência codificada na qual a sequência codificada de baixa frequência adquirida pelos meios de codificação de baixa frequência e a sequência codificada de alta frequência construída pelos meios de construção de sequência codificada são multiplexados.
[027] Um método de codificação de acordo com um aspecto da invenção é um método de codificação de fala de codificação de um sinal de fala, incluindo etapa de transformação de frequência, pelos meios de transformação de frequência, de transformação de sinal de fala em um domínio da frequência; etapa de subamostragem, pelos meios de subamostragem, da subamostragem do sinal de fala e aquisição de um sinal de frequência baixa; a etapa de codificação de frequência baixa, pelos meios de codificação de frequência baixa, da codificação do sinal de frequência baixa adquirido pelos meios de subamostragem; primeira a N-ésima (N é um inteiro igual a ou maior do que dois) etapas de cálculo de envelope de tempo de baixa frequência, pelos primeiros a N-ésimos meios de cálculo de envelope de tempo de baixa frequência, de cálculo de uma pluralidade de envelopes de tempo de componentes de baixa frequência do sinal de fala transformado sem domínio da frequência pelos meios de transformação de frequência; etapa de cálculo de informação de envelope de tempo. Pelos meios de cálculo de informação de envelope de tempo, do cálculo da informação de envelope de tempo necessária para adquirir um envelope de tempo de componentes de alta frequência do sinal de fala transformados pelos meios de transformação de frequência utilizando os envelopes de tempo dos componentes de baixa frequência calculados pelos primeiros a N-ésimos meios de cálculo de envelope de tempo de frequência baixa; etapa de cálculo de informação suplementar, pelos meios de cálculo de informação suplementar, da análise de sinal de fala e cálculo da informação suplementar para geração de alta frequência a ser utilizada para a geração de componentes de alta frequência a partir do sinal de frequência baixa; etapa de quantização e codificação, pelos meios de quantização e codificação, da quantização e codificação de informação suplementar para a geração de alta frequência gerada pelos meios de cálculo de informação suplementar e a informação de envelope de tempo calculada pelos meios de cálculo de informação de envelope de tempo etapa de construção de sequência codificada, pelos meios de construção de sequência codificada, da construção de uma sequência codificada de alta frequência a partir da informação suplementar para geração de alta frequência e informação de envelope de tempo quantizada e codificada pelos meios de quantização e codificação; e etapa de multiplexação, pelos meios de multiplexação, de geração de uma sequência codificada na qual a sequência codificada de baixa frequência adquirida pelos meios de codificação de baixa frequência e a sequência codificada de alta frequência construída pelos meios de construção de sequência codificada são multiplexadas.
[028] Um programa de codificação de acordo com um aspecto da invenção é um programa de codificação de fala que codifica um sinal de fala, o programa fazendo com que um computador funcione como meios de transformação de frequência para transformar o sinal de fala em um domínio da frequência; meios de subamostragem para subamostrar o sinal de fala e adquirir um sinal de frequência baixa; os meios de codificação de frequência baixa para codificar o sinal de frequência baixa adquirido pelos meios de subamostragem; primeiros a N-ésimos meios de cálculo de envelope de tempo de baixa frequência (N é um inteiro igual a ou maior do que dois) para calcular uma pluralidade de envelopes de tempo de componentes de baixa frequência do sinal de fala transformados em domínio da frequência pelos meios de transformação de frequência; meios de cálculo de informação de envelope de tempo para calcular a informação de envelope de tempo necessária para aquisição de um envelope de tempo de componentes de alta frequência do sinal de fala transformado pelos meios de transformação de frequência utilizando os envelopes de tempo dos componentes de baixa frequência calculados pelos primeiros a N-ésimos meios de cálculo de envelope de tempo de baixa frequência; meios de cálculo de informação suplementar para analisar o sinal de fala e calcular a informação suplementar para a geração de alta frequência a ser utilizada para a geração de componentes de alta frequência a partir do sinal de baixa frequência; meios de quantização e codificação para quantizar e codificar a informação suplementar para geração de alta frequência gerada pelos meios de cálculo de informação suplementar e a informação de envelope de tempo calculada pelos meios de cálculo de informação de envelope de tempo; meios de construção de sequência codificada para construir uma sequência codificada de alta frequência a partir da informação suplementar para geração de alta frequência e a informação de envelope de tempo quantizada e codificada pelos meios de quantização e codificação; e meios de multiplexação para gerar uma sequência codificada na qual a sequência codificada de baixa frequência adquirida pelos meios de codificação de baixa frequência e a sequência codificada de alta frequência construída pelos meios de construção de sequência codificada são multiplexadas.
[029] De acordo com o codificador de fala, o método de codificação ou o programa de codificação descritos acima, o sinal de frequência baixa é obtido pela subamostragem de um sinal de fala, e o sinal de baixa frequência é codificado e, por outro lado, uma pluralidade de envelopes de tempo de componentes de baixa frequência é calculada com base no sinal de fala no domínio da frequência, e a informação de envelope de tempo para aquisição do envelope de tempo dos componentes de alta frequência é calculada utilizando- se a pluralidade de envelopes de tempo de componentes de baixa frequência. Adicionalmente, a informação suplementar para geração de alta frequência para geração de componentes de alta frequência a partir do sinal de baixa frequência é calculada, e, depois de a informação suplementar para geração de alta frequência e informação de envelope de tempo serem quantizadas e codificadas, a sequência codificada de alta frequência contendo a informação suplementar para geração de alta frequência e a informação de envelope de tempo é construída. Então, a sequência codificada na qual a sequência codificada de baixa frequência e a sequência codificada de alta frequência são multiplexadas é gerada. De acordo, quando a sequência codificada é registrada no decodificador, uma pluralidade de envelopes de tempo de baixa frequência podem ser utilizados para ajuste do envelope de tempo de componentes de alta frequência no lado de decodificador, e, dessa forma, a forma de onda do envelope de tempo de componentes de alta frequência é ajustado com alta precisão pelo uso de correlação entre o envelope de tempo de componentes de baixa frequência e o envelope de tempo de componentes de alta frequência no lado do decodificador. Como resultado disso, o envelope de tempo no sinal decodificado é ajustado em um formato menos distorcido e, portanto, um sinal reproduzido no qual o pré-eco e o pós-eco são suficientemente reduzidos pode ser obtido no lado do decodificador.
[030] É preferível que o codificador de fala inclua adicionalmente os meios de cálculo de envelope de frequência para calcular a informação de envelope de frequência dos componentes de frequência alta do sinal de fala transformado no domínio da frequência pelos meios de transformação de frequência, os meios de quantização e codificação quantizando e codificando adicionalmente a informação de envelope de frequência, e os meios de construção de sequência codificado construindo a sequência codificada de alta frequência pela adição adicional da informação de envelope de frequência quantizada e codificada pelos meios de quantização e codificação. Nessa configuração, o ajuste do envelope de frequência dos componentes de alta frequência pode ser realizado no lado do decodificador, e, portanto, um sinal reproduzido com características de frequência aperfeiçoadas pode ser obtido no lado do decodificador.
[031] É preferível também que o codificador de fala inclua adicionalmente meios de geração de informação de controle para gerar informação de controle de cálculo de envelope de tempo que controla o cálculo de envelope de tempo em um decodificador de fala utilizando pelo menos um sinal de fala transformado no domínio da frequência pelos meios de transformação de frequência e a informação de envelope de tempo calculada pelos meios de cálculo de informação de envelope de tempo, e os meios de construção de sequência codificada constrói a sequência codificada de alta frequência pela adição de informação de controle de cálculo de envelope de tempo gerada pelos meios de geração de informação de controle. Nesse caso, é possível se aumentar a eficiência do cálculo de envelope de tempo no lado do decodificador pela referência à propriedade tal como energia do sinal de fala e informação de envelope de tempo, reduzindo, assim, a quantidade de computação.
[032] É preferível também que os meios de cálculo de informação de envelope de tempo calcule um envelope de tempo de componentes de alta frequência do sinal de fala transformados no domínio da frequência pelos meios de transformação de frequência, e calcula a informação de envelope de tempo com base na correlação entre um envelope de tempo calculado a partir do primeiro ao N-ésimo envelope de tempo de componentes de baixa frequência e o envelope de tempo dos componentes de frequência.
Efeitos Vantajosos da Invenção
[033] De acordo com a presente invenção, é possível se ajustar o envelope de tempo de um sinal decodificado em um formato menos distorcido e, dessa forma, obter um sinal reproduzido no qual o pré-eco e o pós-eco são suficientemente reduzidos.
Breve Descrição dos Desenhos
[034] A Fig. 1 é um diagrama em bloco esquemático de um decodificador de fala 1 de acordo com uma primeira modalidade da invenção; a Fig. 2 é um fluxograma ilustrando um procedimento de um método de decodificação de fala implementado pelo decodificador de fala 1 ilustrado na Fig. 1; a Fig. 3 é um diagrama em bloco esquemático de um codificador de fala 2 de acordo com a primeira modalidade da invenção; a Fig. 4 é um fluxograma ilustrando um procedimento de um método de codificação de fala implementado pelo codificador de fala 2 ilustrado na Fig. 3; a Fig. 5 é um diagrama ilustrando uma configuração de uma parte principal relacionada com o cálculo de envelope em um primeiro exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade; a Fig. 6 é um fluxograma ilustrando um procedimento de cálculo de envelope pelo decodificador de fala 1 ilustrado na Fig. 5; a Fig. 7 é um diagrama ilustrando uma configuração de uma parte principal relacionada com o cálculo de envelope em um segundo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade; a Fig. 8 é um fluxograma ilustrando um procedimento do cálculo de envelope pelo decodificador de fala 1 ilustrado na Fig. 7; a Fig. 9 é um diagrama ilustrando uma configuração de uma parte principal relacionada com o cálculo de envelope em um terceiro exemplo ilustrativo do decodificador de fala 1 de acordo com a primeira modalidade; a Fig. 10 e um fluxograma ilustrando um procedimento do cálculo de envelope pelo decodificador de fala 1 ilustrado na Fig. 9; a Fig. 11 é um fluxograma ilustrando um procedimento de cálculo de envelope em um quarto exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade; a Fig. 12 é um fluxograma ilustrando um procedimento do cálculo de envelope em um quinto exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade; a Fig. 13 é um fluxograma ilustrando um procedimento do cálculo de envelope em um sexto exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade; a Fig. 14 é um fluxograma ilustrando um procedimento do cálculo de envelope de tempo de uma unidade de cálculo de envelope de tempo 1g em um sétimo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade; a Fig. 15 é um fluxograma ilustrando uma parte do processamento de uma unidade de controle de cálculo de envelope de tempo 1m quando o sétimo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade é aplicado ao segundo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade; a Fig. 16 é um fluxograma ilustrando uma parte do processamento de uma unidade de controle de cálculo de envelope de tempo 1n quando o sétimo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade é aplicado ao quarto exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade; a Fig. 17 é um diagrama ilustrando uma configuração de um primeiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade; a Fig. 18 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 2 ilustrado na Fig. 7; a Fig. 19 é um diagrama ilustrando uma configuração de um segundo exemplo ilustrativo do codificador de fala 2 de acordo com a primeira modalidade; a Fig. 20 é um fluxograma ilustrando um procedimento da codificação de fala pelo codificador de fala 2 ilustrado na Fig. 19; a Fig. 21 é um diagrama ilustrando uma configuração de um terceiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade; a Fig. 22 é um fluxograma ilustrando um procedimento da codificação de fala pelo codificador de fala 2 ilustrado na Fig. 21; a Fig. 23 é um diagrama ilustrando uma configuração de um decodificador de fala 101 de acordo com uma segunda modalidade; a Fig. 24 é um fluxograma ilustrando um procedimento de decodificação de fala pelo decodificador de fala 101 ilustrado na Fig. 23; a Fig. 25 é um diagrama ilustrando uma configuração de um codificador de fala 102 de acordo com a segunda modalidade; a Fig. 26 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 102 ilustrado na Fig. 25; a Fig. 27 é um diagrama ilustrando uma configuração qual o primeiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade da invenção é aplicado ao codificador de fala 102 de acordo com a segunda modalidade da invenção; a Fig. 28 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 102 ilustrado na Fig. 27; a Fig. 29 é um diagrama ilustrando uma configuração quando o segundo exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade da invenção é aplicado ao codificador de fala 102 de acordo com a segunda modalidade da invenção; a Fig. 30 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 102 ilustrado na Fig. 29; a Fig. 31 é um diagrama ilustrando uma configuração de um decodificador de fala 201 de acordo com uma terceira modalidade; a Fig. 32 é um fluxograma ilustrando um procedimento de decodificação de fala pelo decodificador de fala 201 ilustrado na Fig. 31; a Fig. 33 é um diagrama ilustrando uma configuração de um decodificador de fala 301 de acordo com uma quarta modalidade; a Fig. 34 é um fluxograma ilustrando um procedimento de decodificação de fala pelo decodificador de fala 301 ilustrado na Fig. 33; a Fig. 35 é um diagrama ilustrando uma configuração de um codificador de fala 202 de acordo com a terceira modalidade; a Fig. 36 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 202 ilustrado na Fig. 35; a Fig. 37 é um diagrama ilustrando uma configuração de um codificador de fala 302 de acordo com uma quarta modalidade; a Fig. 38 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 302 ilustrado na Fig. 37; a Fig. 39 é um diagrama ilustrando uma configuração de um terceiro exemplo alternativo do decodificador de fala 101 de acordo com a segunda modalidade; e a Fig. 40 é um fluxograma ilustrando um procedimento de decodificação de fala pelo decodificador de fala 101 ilustrado na Fig. 39.
Descrição das Modalidades
[035] As modalidades preferidas de um decodificador de fala, um codificador de fala, um método de decodificação de fala, um método de codificação de fala, um programa de decodificação de fala, um programa de codificação de fala de acordo com a invenção são descritos abaixo em detalhes com referência aos desenhos. É notado que, na descrição dos desenhos, os mesmos elementos receberão os mesmos símbolos de referência e a descrição redundante será omitida.
Primeira Modalidade
[036] A Fig. 1 é um diagrama em bloco esquemático de um decodificador de fala 1 de acordo com uma primeira modalidade da invenção, e a Fig. 2 é um fluxograma ilustrando um procedimento de um método de decodificação de fala implementado pelo decodificador de fala 1. O decodificador de fala 1 inclui CPU, ROM, RAM, um dispositivo de comunicação e similares que não são fisicamente ilustrados, e a CPU carrega um programa de computador especificado (por exemplo, um programa de computador para a realização do processo ilustrado no fluxograma da Fig. 2) armazenado em uma memória interna tal como ROM do decodificador de fala 1 para a RAM e executa o programa para, dessa forma, exercer o controle sobre o decodificador de fala 1. O dispositivo de comunicação do decodificador de fala 1 recebe uma sequência codificada multiplexada que é enviada a partir do codificador de fala 2, que será descrito posteriormente, e envia um sinal de fala decodificado para fora.
[037] Como ilustrado na Fig. 1, o decodificador de fala 1 inclui de forma funcional uma unidade de demultiplexação (meios de demultiplexação) 1a, uma unidade de decodificação de baixa frequência (meios de decodificação de baixa frequência) 1b, uma unidade de banco de filtro de divisão de banda (meios de transformação de frequência) 1c, uma unidade de análise de sequência codificada (meios de análise de sequência codificada de alta frequência) 1d, uma unidade de quantização inversa/decodificação de sequência codificada (meios de quantização inversa e decodificação de sequência codificada) 1e, primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência (n é um inteiro igual a ou maior do que dois) (meios de cálculo de envelope de tempo de baixa frequência) 1f1 a 1fn, uma unidade de cálculo de envelope de tempo (meios de cálculo de envelope de tempo) 1g, uma unidade de geração de frequência alta (meios de geração de alta frequência) 1h uma unidade de ajuste de envelope de tempo (meios de ajuste de envelope de tempo) 1i, e uma unidade de banco e filtro de síntese de banda (meios de transformação de frequência inversa) 1j (1c a 1e e 1h a 1i são algumas vezes referidos também como uma unidade de extensão de banda (meios de extensão de banda)). As unidades funcionais respectivas do decodificador de fala 1 ilustradas na Fig. 1 são funções que são implementadas pela CPU do decodificador de fala 1 executando um programa de computador armazenado na memória interna do decodificador de fala 1. A CPU do decodificador de fala 1 executa o programa de computador (utiliza as unidades funcionais da Fig. 1) e, dessa forma, executa sequencialmente o processo ilustrado no fluxograma da Fig. 2 (cesso das etapa sS01 a S10). É considerado que vários dados necessários para execução do programa de computador e vários dados gerados pela execução do programa de computador sejam armazenados na memória interna, tal como ROM e RAM, do decodificador de fala 1.
[038] As funções das unidades funcionais respectivas do decodificador de fala 1 são descritas doravante em detalhes.
[039] A unidade de demultiplexação 1a divide uma sequência codificada multiplexada que entra através do dispositivo de comunicação do decodificador de fala 1 em uma sequência codificada de baixa frequência e uma sequência codificada de alta frequência pela demultiplexação.
[040] A unidade de decodificação de frequência baixa 1b decodifica a sequência codificada de baixa frequência suprida a partir da unidade de demultiplexação 1a, e, dessa forma obtém um sinal decodificado que contém componentes de baixa frequência apenas. Um método de decodificação pode ser baseado em um método de codificação de fala tal como CELP (Previsão Linear Excitada por Código) ou com base em codificação de áudio tal como AAC (Codificação de Áudio Avançada) e TCX (Excitação Codificada por Transformação). Adicionalmente, pode ser baseado em codificação PCM (Modulação de Código de Pulso). Adicionalmente, pode ser baseado em um método que utiliza esses métodos de codificação pela comutação entre os mesmos. Nessa modalidade, um método de codificação não é particularmente limitado.
[041] A unidade de banco de filtro de divisão de banda 1c analisa o sinal decodificado apenas contendo componentes de frequência baixa supridos a partir da unidade de decodificação de frequência baixa 1b e transforma o sinal decodificado em um sinal no domínio da frequência. Doravante, o sinal no domínio da frequência que corresponde à banda de baixa frequência adquirido pela unidade de banco de filtro de divisão de banda 1c é representado como Xdec(j,i) {0 < j < kx, t(s)<i<t(s+1), 0<S<SE}, onde j é um índice na direção de frequência, i é um índice na direção de tempo e kx é um inteiro não negativo. Adicionalmente, t é definido de modo que a faixa t(s)<i<t(s+1) do sinal Xdec(j,i) com relação ao índice i corresponda ao quadro s (0<s<SE). Adicionalmente, SE é o número de todos os quadros. O quadro acima corresponde ao quadro especificado pelos padrões de codificação ao qual o método de codificação da unidade de decodificação de baixa frequência 1b se conforma. Adicionalmente, o quadro acima pode corresponder ao chamado quadro SBR ou segmento de tempo de envelope SBR em SBR utilizado em "MPEG4 AAC" especificado por "ISO/IEC 14496-3". Note que, nessa modalidade, o intervalo de tempo especificado pelo quadro não é limitado ao exemplo acima. O índice acima i pode corresponder a uma subamostra de sub-banda QMF de uma partição de tempo igualando várias sub-bandas em SBR utilizadas em "MPEG4 AAC" especificado por "ISO/IEC 14496-3".
[042] A unidade de análise de sequência codificada 1d analisa a sequência codificada de alta frequência suprida a partir da unidade de demultiplexação 1a e, dessa forma, adquire a informação suplementar codificada para a geração de alta frequência e informação de envelope de frequência e tempo codificada.
[043] A unidade de quantização inversa/de decodificação de sequência codificada 1e decodifica e quantiza inversamente a informação suplementar codificada para geração de alta frequência suprida a partir da unidade de análise de sequência codificada 1d e, dessa forma, obtém informação suplementar codificada para geração de alta frequência, e decodifica e quantiza de forma inversa a informação de envelope de tempo codificada suprida a partir da unidade de análise de sequência codificada 1d e, dessa forma, adquire informação de envelope de tempo.
[044] As primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn calculam diferentes envelopes de tempo um do outro. Especificamente, a unidade de cálculo de envelope de tempo de baixa frequência k 1fk (1<k<n) recebe um sinal de baixa frequência X(j,i) {0<j<kx, t(s)<i<t(s+1), 0<S<SE} da unidade de banco de filtro de divisão de banda 1c e calcula o envelope de tempo k Ldec(k,i) na banda de baixa frequência (processamento na etapa Sb6). Para ser específico, a unidade de cálculo de envelope de tempo de baixa frequência k 1fk calcula o envelope de tempo Ldec(k,i) como segue.
[045] Primeiro, as diferentes sub-bandas na banda de baixa frequência podem ser especificadas utilizando-se dois inteiros Kl e Kh satisfazendo a condição a seguir. Equação 1 0 < kl < kh < hx
[046] O número total de possíveis conjuntos de inteiros (Kl, Kh) satisfazendo a condição acima é nmax=kx(kx+1)/2. As sub-bandas podem ser especificadas pela seleção de qualquer um dentre esses conjuntos de inteiros.
[047] A seguir, n sub-bandas são especificadas pela seleção de n conjuntos de interior nmax. Doravante, para representar bandas, dois conjuntos Bi e Bh com o tamanho n são definidos de modo que os Inal Xdec(j,i) {Bi(k)<j<Bh(k), t(s)<i<t(s+1)), 0<S<SE} corresponda ao componente de sub-banda k (1<k<n).
[048] Adicionalmente, o envelope de tempo de energia dos componentes de sub-banda n é adquirido pela seguinte equação. Equação 2
Figure img0001
[049] Então, a equação a seguir é calculada a partir do EL(k,i) acima. Equação 3
Figure img0002
[050] Então, um envelope de tempo L(k,i) é adquirido pela realização de processamento especificado na quantidade L0 (k,i). Por exemplo, o envelope de tempo L(k,i) pode ser adquirido pela suavização da quantidade L0(k,i) na direção de tempo pela utilização da equação a seguir. Equação 4
Figure img0003
[051] Na equação acima, SC(j), 0<j<d é o coeficiente de suavização e d é a ordem de suavização. O valor de sc(j) é configurado pela seguinte equação, por exemplo. Equação 5 sc(j) = 1/(d+1), 0 < j < d
[052] No entanto, nessa modalidade, o valor de sc(j) não está limitado à equação acima.
[053] Adicionalmente, L0(k,i) acima pode ser calculado pela equação a seguir, por exemplo. Equação 6
[054] Adicionalmente, L0(k,i) acima pode ser calculado pela equação a seguir, por exemplo. Equação 7
Figure img0004
[055] onde ε é o coeficiente de relaxamento para evitar a divisão por zero. Adicionalmente, L0(k,i) acima pode ser calculado pela equação a seguir, por exemplo. Equação 8
Figure img0005
[056] O envelope de tempo Ldec(k,i) calculado pela unidade de cálculo de envelope de tempo de baixa frequência k 1fk é obtida utilizando a seguinte equação. Equação 9 Ldec(k,i) = L0(k,i) 1<k<n, t(s)<i<t(s+1), 0<S<SE na seguinte equação: Equação 10 Ldec(k,i) = L1(k,i) 1<k<n, t(s)<i<t(s+1), 0<s<SE 1<l,m<n-1
[057] Note que Ldec(k,i) acima pode ser qualquer parâmetro representando a variação de tempo da energia de sinal ou amplitude de sinal do sinal de sub-banda k e não está limitado à forma acima de L0(k,i) e L1(k,i).
[058] Adicionalmente, Ldec(k,i) acima pode ser calculado por um método utilizado a análise de componente principal como se segue.
[059] Primeiro, no processo de cálculo de Ldec(k,i) {1<k<n, t(s)<i<t(s+1), 0<s<sE} descrito acima, m tipos de quantidades correspondendo a Ldec(k,i) acima são calculados para o índice k pela substituição de n por outro inteiro m=n-1, e essas quantidades são representadas como L2(k,i) {1<k<m(=n-1), t(s)<i<t(s+1), 0<s<sE}. Então, L2(l,i) acima {1<l<m, t(s)<i<t(s+1)} correspondendo ao quadro s (0<s<sE) é considerado como amostras do número m de vetores com a ordem D=t(s+1)-t(s), e a média dessas amostras é calculada pela equação a seguir. Equação 11
Figure img0006
[060] Utilizando-se a média acima, o vetor de deslocamento é definido pela equação a seguir. Equação 12
Figure img0007
[061] A partir desses vetores de deslocamento, a matriz de variação e covariância Cov com o tamanho de DxD é calculada pela seguinte equação. Equação 13
Figure img0008
[062] Então, os autovetores V(k) da matriz Cov que satisfazem a equação a seguir Equação 14
Figure img0009
[063] e são ortogonais um ao outro são calculados. O V(k)i acima é o componente dos autovetores V(k) e X(k) é o autovalor da matriz Cov correspondente a V(k). Cada um dos vetores acima V(k) pode ser normalizado. No entanto, um método de normalização não está limitado nessa invenção. Doravante, é considerado que X(1) > X(2) > ... > X(D) para simplificar a descrição.
[064] Utilizando-se os autovetores adquiridos da forma acima, a unidade de cálculo de envelope de tempo de baixa frequência 1fk (1<k<n) calcula o envelope de tempo Ldec(k,i) como segue. Especificamente, quando D > m (=n-1), n-1 vetores são selecionados a partir dos autovetores acima na ordem de tamanho de autovalores correspondentes, e o envelope de tempo é calculado pela seguinte equação. Equação 15
Figure img0010
[065] Por outro lado, quando D<m(=n-1), o envelope de tempo é calculado pela equação a seguir utilizando os autovetores acima. Equação 16
Figure img0011
[066] onde α é um número constante, e α = 0, por exemplo. Adicionalmente, quando D<m(=n-1), o envelope de tempo pode ser calculado pela equação a seguir. Equação 17
Figure img0012
[067] Adicionalmente, Ldec(k,i) acima pode ser calculado pelo método a seguir. Primeiro, no processo de cálculo de L2(l,i) descrito acima, L2(l,i), 1 < 1 < m, t(s)<i<t(s+1), 0<s<SE é calculado assumindo m=n. Os mesmos podem ser considerados com um grupo de n vetores com ordem D=t(s+1)-t(s). Utilizando n vetores, n vetores ortogonais são calculados por um método tal como a ortogonalização Gram-Schmidt e determinados como Ldec(k,i), 1 < 1 < n , t(s)<i<t(s+1), 0<S<SE. Um método de ortogonalização, no entanto, não está limitado ao exemplo acima. Adicionalmente, os vetores ortogonais não são necessariamente normalizados.
[068] A unidade de cálculo de envelope de tempo 1g calcula um envelope de tempo de alta frequência utilizando n envelopes de tempo de baixa frequência supridos a partir da primeira a n-ésima unidades de cálculo de envelope e tempo de baixa frequência 1f1 a 1fn e a informação de envelope de tempo suprida a partir da unidade de quantização inversa/decodificação de sequência codificada 1e. Especificamente, o cálculo de envelope de tempo pela unidade de cálculo de envelope de tempo 1g é realizado como segue.
[069] Primeiro, a banda de alta frequência é dividida e nH(nH > 1) subbandas, e essas sub-bandas são representadas como B(T)l(1=1, 2, 3, ..., nH). A seguir, utilizando-se o envelope de tempo descrito acima Ldec(k,i), o envelope de tempo gdec(l,i) da sub-banda B(T)l na banda de alta frequência é calculado. i é o índice de direção de tempo.
[070] Por exemplo, gdec(l,i) descrito acima é fornecido pela equação a seguir. Equação 18
Figure img0013
O valor na equação acima: Equação 19
Figure img0014
é a informação de envelope de tempo suprida a partir da unidade de quantização inversa/decodificação de sequência codificada 1e.
[071] Adicionalmente, na informação de envelope de tempo suprida a partir da unidade de quantização inversa/decodificação de sequência codificada 1e, o coeficiente Al,k(s) pode conter o coeficiente: Equação 20
Figure img0015
e, nesse caso, gdec(l,i) acima pode ser fornecido pela seguinte equação. Equação 21
Figure img0016
[072] Adicionalmente, a informação de envelope de tempo suprida a partir da unidade de quantidade inversa/de decodificação de sequência codificada 1e pode conter o coeficiente fornecido pela equação a seguir: Equação 22
Figure img0017
em adição ao coeficiente acima Ai,k(s){1<l<nH, 1<k<n, 0<S<SE} ou o coeficiente acima Ai,k(s) {1<l<nH, 0<k<n, 0<S<SE}, e, nesse caso, gdec(l,i) acima pode ser fornecido pela equação a seguir: Equação 23
Figure img0018
ou a equação a seguir: Equação 24
Figure img0019
onde U(k,i) {1<k<g, t(s)<i<t(s+1), 0<s<sE} é um coeficiente especificado ou uma função especificada. Por exemplo, U(k,i) pode ser a função fornecida pela seguinte equação: Equação 25
Figure img0020
onde Q é um coeficiente especificado.
[073] O gdec(l,i) acima pode estar em outra forma desde que seja uma representação por Ldec(k,i) e a informação de envelope de tempo não seja limitada à forma do coeficiente Al,k(s).
[074] Finalmente, utilizando-se gdec(l,i) acima, a unidade de cálculo de envelope de tempo 1g calcular o envelope de tempo pela equação a seguir. Equação 26
Figure img0021
ou a equação a seguir. Equação 27
Figure img0022
[075] A unidade de geração de alta frequência 1h duplica o sinal de baixa frequência Xdec(j,i) {0<j<kx, t(s)<i<t(s+1), 0<S<SE} suprido a partir da unidade de banco de filtro de divisão de banda 1c em uma banda de alta frequência utilizando a informação suplementar para geração de alta frequência suprida a partir da unidade de quantização inversa/decodificação de sequência codificada 1e e, dessa forma, gera um sinal de alta frequência Xdec(j,i) {kx<j<kmax, t(s)<i<t(s+1), 0<s<sE}. A geração de banda de alta frequência é realizada de acordo com um método de geração HF em SBR de "MPEG4 AAC" especificado por "ISO/IEC 14496-3" ("ISO/IEC 14496-3 subparte 4 Codificação de Áudio Geral").
[076] A unidade de ajuste de envelope de tempo 1i ajusta o envelope de tempo do sinal de alta frequência XHGJ) {kx<j<kmax, t(s)<i<t(s+1), 0<S<SE} suprido a partir da unidade de geração de alta frequência 1h pela utilização do envelope de tempo ET(l,i) {1<l<nH, t(s)<i<t(s+1), 0<s<sE} suprido a partir da unidade de cálculo de envelope de tempo 1g.
[077] Especificamente, o ajuste do envelope de tempo é feito por um método similar ao ajuste HF em SBR de "MPEG4 AAC" como descrito abaixo. Por motivos de simplificação, um método que leva em consideração apenas a adição de ruído no ajuste HF é descrito abaixo, e métodos correspondentes ao processamento tal como limitador de ganho, suavizador de ganho e adição de senoide são omitidos. No entanto, é fácil se generalizar o processamento de modo a incluir o processamento omitido acima. Note que é considerado que o piso de ruído e fator de escalonamento necessários para a realização do processamento correspondendo à adição de ruído ou um parâmetro necessário para realização do processamento omitido descrito acima já são supridos a partir da unidade de quantização inversa/decodificação de sequência codificada 1e.
[078] Primeiro, para simplificação da descrição a seguir, um conjunto FH possuindo nH+1 índices representando o limite da sub-banda B(T)1 (1<l<nH) como coeficientes é definido de modo que o sinal XH(j,i) {FH(1)<j<FH(l+1), t(s)<i<t(s+1), 0<s<sE} corresponde ao componente da sub-banda B(T)1-. Note que FH(1)=kx e FH(nH+1) = kmax+1.
[079] Sob a definição acima, o envelope de tempo é transformado pela seguinte equação: Equação 28
Figure img0023
[080] Depois disso, o piso de ruído e fator de escalonamento Q(m,i) fornecidos pela unidade de quantização inversa/decodificação de sequência codificada 1e são transformados pela seguinte equação: Equação 29
Figure img0024
onde M=F(nH+1)-F(1). Adicionalmente, o ganho é calculado pela seguinte equação: Equação 30
Figure img0025
[081] A quantidade representada pela equação a seguir é definida. Equação 31
Figure img0026
[082] Finalmente, a unidade de ajuste de envelope de tempo 1i obtém o sinal com o envelope de tempo ajustado pela seguinte equação: Equação 32
Figure img0027
onde V0 e V1 são conjuntos especificando o componente de ruído, e f é a função para mapear o índice i em um índice nos conjuntos (vide "ISO/IEC 144963 4.B.18" para um exemplo específico).
[083] A unidade de banco de filtro de síntese de banda 1j adiciona o sinal de alta frequência Y(i,j) {kx<j<kmax, t(s)<i<t(s+1), 0<S<SE} suprido a partir da unidade de ajuste de envelope de tempo 1i e o sinal de baixa frequência X(j,i) {0<j<kx, t(s)<i<t(s+1), 0<s<sE} suprido a partir da unidade de banco de filtro de divisão de banda 1c juntos e então sintetiza os mesmos, e, dessa forma, adquire um sinal de fala decodificado no domínio do tempo contendo os componentes de frequência inteiros, e envia o sinal de fala adquirido para fora através do dispositivo de comunicação interna.
[084] Depois disso, a operação do decodificador de fala 1 é descrita e o método de decodificação de fala no decodificador de fala 1 também é descrito em detalhes com referência à Fig. 2.
[085] Primeiro, a unidade de demultiplexação 1a divide a sequência codificada de entrada em sequência codificada de baixa frequência e sequência codificada de alta frequência (etapa S01). A seguir, a unidade de decodificação de baixa frequência 1b decodifica a sequência codificada de baixa frequência e obtém o sinal decodificado apenas contendo componentes de baixa frequência (Etapa S02). Então, a unidade de banco de filtro de divisão de banda 1c analisa o sinal decodificado apenas contendo componentes de baixa frequência e transforma o mesmo em sinal no domínio da frequência (Etapa S03).
[086] Adicionalmente, a unidade de análise de sequência codificada 1d analisa a sequência codificada de alta frequência e adquire a informação suplementar codificada para a geração de alta frequência e a informação de envelope de tempo quantizado (etapa S04). Então a unidade de quantização inversa/decodificação de sequência codificada 1e decodifica a informação suplementar para geração de alta frequência e quantiza de forma inversa a informação de envelope de tempo (etapa S05). Depois disso, a unidade de geração de alta frequência 1h duplica o sinal de baixa frequência Xdec(j,i) na banda de alta frequência utilizando informação suplementar para geração de alta frequência e, dessa forma, gera o sinal de alta frequência Xdec(j,i) (etapa S06). Então, a primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn calcula uma pluralidade de envelopes de tempo de baixa frequência Ldec(k,i) com base no sinal de baixa frequência X(j,i) (Etapa S07).
[087] Adicionalmente, a unidade de cálculo de envelope de tempo 1g calcula o envelope de tempo de alta frequência ET(l,i) utilizando a pluralidade de envelopes de tempo de baixa frequência Ldec(k,i) e a informação de envelope de tempo (etapa S08). Então, a unidade de ajuste de envelope de tempo 1i ajusta o envelope de tempo do sinal de alta frequência XH(j,i) pela utilização do envelope de tempo ET(l,i) (Etapa S09). Finalmente, a unidade de banco de filtro de síntese de banda 1j adiciona sinal de alta frequência Y(i,j) e o sinal de baixa frequência X(j,i) juntos e então sintetiza os mesmos para, dessa forma, adquirir o sinal de fala decodificado no domínio do tempo e envia o sinal de fala decodificado (Etapa S10).
[088] A Fig. 3 é um diagrama ilustrando uma configuração do codificador de fala 2 de acordo com a primeira modalidade da invenção, e a Fig. 4 é um fluxograma ilustrando um procedimento de um método de codificação de fala implementado pelo codificador de fala 2. O codificador de fala 2 inclui CPU, ROM, RAM um dispositivo de comunicação e similares que não são ilustrados fisicamente, e a CPU carrega um programa de computador específico (por exemplo, um programa de computador para a realização do processo ilustrado em um fluxograma da figura 4) armazenado em uma memória interna tal como ROM do codificador de fala 2 para a RAM e executa o programa para, dessa forma, exercer controle sobre o codificador de fala 2. O dispositivo de comunicação do codificador de fala 2 recebe um sinal de fala a ser codificado a partir de fora e envia uma sequência de bits multiplexada e codificada para fora.
[089] Como ilustrado na Fig. 3, um codificador de fala 2 inclui de forma funcional uma unidade de subamostragem (meios de subamostragem) 2a, uma unidade de codificação de baixa frequência (meios de codificação de baixa frequência) 2b, uma unidade de banco de filtro de divisão de banda (meios de transformação de frequência) 2c, uma informação suplementar para unidade de cálculo de geração de alta frequência (meios de cálculo de informação suplementar) 2d, primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência (n é um inteiro igual a ou maior do que dois) (meios de cálculo de envelope de tempo de baixa frequência) 2e1 a 2en, uma unidade de cálculo de informação de envelope de tempo (meios de cálculo de informação de envelope de tempo) 2f, uma unidade de codificação/quantização (meios de quantização e codificação) 2g, uma unidade de construção de sequência codificada de alta frequência (meios de construção de sequência codificada) 2h, e uma unidade de multiplexação (meios de multiplexação) 2i. As unidades funcionais respectivas do codificador de fala 2 ilustrado na figura 3 são funções que são implementadas pela CPU do codificador de fala 2 executando um programa de computador armazenado na memória interna do codificador de fala 2. A CPU do codificador de fala 2 executa o programa de computador (utiliza as unidades funcionais da figura 3) e, dessa forma, executa sequencialmente o processo ilustrado no fluxograma da Fig. 4 (o processo das etapas S11 a S20). Assume-se que vários dados necessários para a execução do programa de computador sejam armazenados na memória interna, tal como ROM e RAM, do codificador de fala 2.
[090] A unidade de subamostragem 2a processa um sinal de entrada externo que é recebido através do dispositivo de comunicação do codificador de fala 2 e obtém um sinal de domínio do tempo subamostrado na banda de frequência baixa. A unidade de codificação de baixa frequência 2b codifica o sinal de domínio do tempo subamostrado e obtém uma sequência codificada de baixa frequência. A codificação na unidade de codificação de baixa frequência 2b pode ser baseada no método de codificação de fala tal como CELP, ou com base na codificação de transformação tal como AAC ou codificação de áudio tal como TCX. Adicionalmente, pode ser baseado na codificação PCM. Adicionalmente, pode ser baseado em um método que utiliza esses métodos de codificação pela comutação entre os mesmos. Nessa modalidade, um método de codificação não é particularmente limitado.
[091] A unidade de banco de filtro de divisão de banda 2c analisa um sinal de entrada externo que é recebido através do dispositivo de comunicação do codificador de fala 2 e transforma o mesmo em um sinal X(j,i) na banda de frequência inteira no domínio da frequência, onde j é um índice na direção de frequência, i é um índice na direção de tempo.
[092] A informação complementar para a unidade de cálculo de geração de alta frequência 2d recebe o sinal de domínio da frequência X(j,i) da unidade de banco de filtro de divisão de banda 2c e calcula a informação suplementar para geração de alta frequência a ser utilizada quando da geração de componentes de sinal de alta frequência a partir dos componentes de sinal de baixa frequência com base na análise da energia, variações de sinal, tonalidade e similares da banda de frequência alta.
[093] As primeira a n-ésima unidades de cálculo de envelope de tempo de frequência baixa 2e1 a 2en calculam uma pluralidade de diferentes envelopes de tempo de componentes de baixa frequência, respectivamente. Especificamente, a unidade k de cálculo de envelope de tempo de baixa frequência 2ek (1<k<n) recebe um sinal de baixa frequência X(j,i) {0<j<kx, t(s)<i<t(s+1), 0<S<SE} da unidade de banco de filtro de divisão de banda 2c e calcula o envelope de tempo k L(k,i) {t(s)<i<t(s+1), 0<s<sE} na banda de frequência baixa de acordo com o método de cálculo descrito acima do envelope de tempo Ldec(k,i) da unidade de cálculo de envelope de tempo de baixa frequência k 1fk (1<k<n) do decodificador de fala 1 descrito acima.
[094] A unidade de cálculo de informação de envelope de tempo 2f recebe o sinal de frequência alta X(j,i) {kx<j<N, t(s)<i<t(S+1), 0<s<sE} a partir da unidade de banco de filtro de divisão de banda 2c e recebe o envelope de tempo L(k,i) {t(s)<i<t(s+1), 0<s<sE} da unidade de cálculo de envelope de tempo de baixa frequência k 2ek (1<k<n), e calcula a informação de envelope de tempo necessária para adquirir o envelope de tempo dos componentes de alta do sinal X(j,i). A informação de envelope de tempo é a informação que pode construir a aproximação de um envelope de tempo de referência na banda de alta frequência quando o envelope de tempo Ldec(k,i) é fornecido no lado do decodificador de fala 1 descrito acima.
[095] Especificamente, o cálculo da informação de envelope de tempo é realizado como segue. Primeiro, um envelope de tempo de energia é calculado pela equação a seguir. Equação 33
Figure img0028
[096] A seguir, quando o envelope de tempo de referência na banda de frequência l (1<l<nH) da banda de alta frequência é representado como H(l,i) {t(s)<i<t(s+1)}, o envelope de tempo de referência H(l,i) é calculado pela seguinte equação. Equação 34
Figure img0029
ou pela seguinte equação: Equação 35
Figure img0030
[097] Note que, o envelope de tempo de referência na banda de alta frequência pode ser obtido pela realização do processamento especificado (por exemplo, suavização) em H(l,i), como o envelope de tempo na banda de baixa frequência descrito acima. Adicionalmente, o envelope de tempo de referência na banda de alta frequência não é necessariamente calculado pelo método de cálculo acima desde que seja um parâmetro representando a variação de tempo da energia de sinal ou amplitude de sinal do sinal de alta frequência. Quando a aproximação do envelope de tempo de referência H(l,i) pelo envelope de tempo L(k,i) é representada como g(l,i), a forma de g(l,i) se conforma à forma (l,i) no decodificador de fala 1. O envelope de tempo L(k,i) corresponde ao envelope de tempo Ldec(k,i) no lado do decodificador de fala 1.
[098] Por exemplo, a informação de envelope de tempo pode ser calculada pela definição de um erro de g(l,i) acima com relação ao envelope de tempo de referência H(l,i) e o cálculo g(l,i) que minimiza o erro. Especificamente, pode ser calculado pelo tratamento do erro como uma função da informação de envelope de tempo e encontrando-se a informação de envelope de tempo que fornece o valor mínimo de erro. O cálculo da informação de envelope de tempo pode ser realizado numericamente ou pode ser calculado utilizando-se uma fórmula numérica.
[099] Para ser mais especifico, o erro de g(l,i) acima com relação ao envelope de tempo de referência H(l,i) é calculado pela equação a seguir: Equação 36
Figure img0031
[100] Adicionalmente, o erro pode ser calculado como um erro ponderado utilizando a equação a seguir: Equação 37
Figure img0032
[101] Adicionalmente, o erro pode ser calculado pela equação a seguir: Equação 38
Figure img0033
[102] O peso w(l,i) pode ser definido como um peso que varia com o índice de tempo i ou um peso que varia com o índice de frequência l, e pode ser definido como um peso que varia com o índice de tempo i e o índice de frequência l. Note que, nessa modalidade, a forma do erro e a forma do peso não são particularmente limitadas aos exemplos acima.
[103] A unidade de quantização/codificação 2g recebe a informação de envelope de tempo da unidade de cálculo de informação de envelope de tempo 2f e então quantiza e codifica a informação de envelope de tempo, e recebe informação suplementar para geração de alta frequência a partir da informação suplementar para a unidade de cálculo de geração de alta frequência 2d e então codifica a informação suplementar para geração de alta frequência.
[104] Como um método de quantização e codificação da informação de envelope de tempo, quando a informação está na forma de coeficiente Al,k(s), por exemplo, Al,k(s) pode ser quantizado de forma escalar e então codificado por entropia. Adicionalmente, Al,k(s) pode ser quantizado por vetor utilizando um livro código especificado e então seu índice pode ser codificado. Nessa modalidade, no entanto, o método de quantização e codificação da informação de envelope de tempo não está limitado ao acima
[105] A unidade de construção de sequência codificada de alta frequência 2h recebe a informação suplementar codificada para a geração de alta frequência e a informação de envelope de tempo quantizada a partir da unidade de quantização/codificação 2g e constrói uma sequência codificada de alta frequência contendo os mesmos.
[106] A unidade de multiplexação 2i recebe a sequência codificada de baixa frequência da unidade de codificação de baixa frequência 2b e recebe a sequência codificada de alta frequência da unidade de construção de sequência codificada de alta frequência 2h, multiplexa essas duas sequências codificadas para gerar uma sequência codificada e envia a sequência codificada gerada.
[107] Doravante, a operação do codificador de fala 2 é descrita e o método de codificação de fala no codificador de fala 2 também é descrita em detalhes com referência à Fig. 4.
[108] Primeiro, a unidade de banco de filtro de divisão de banda 2c analisa um sinal de fala de entrada e, dessa forma, adquire o sinal de domínio da frequência X(j.i) na banda de frequência inteira (Etapa S11). A seguir, a unidade de subamostragem 2a processa um sinal de fala de entrada externo e adquire o sinal de domínio do tempo subamostrado (Etapa S12). Então, a unidade de codificação de baixa frequência 2b codifica o sinal de domínio do tempo subamostrado e obtém a sequência codificada de baixa frequência (Etapa S13).
[109] Adicionalmente, a informação suplementar para a unidade de cálculo de geração de alta frequência 2d analisa o sinal de domínio da frequência X(j,i) adquirido a partir da unidade de banco de filtro de divisão de banda 2c e calcula a informação suplementar para geração de alta frequência a ser utilizada quando da geração de componentes de sinal de alta frequência (Etapa S14). Então, as primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 2e1 a 2en calculam uma pluralidade de envelopes de tempo de baixa frequência L(k,i) com base no sinal de baixa frequência X(j,i) (Etapa S15). Depois disso, a unidade de cálculo de informação de envelope de tempo 2f calcula a informação de envelope de tempo necessária para aquisição do envelope de tempo de componentes de alta frequência do sinal X(j,i) com base no sinal de alta frequência X(j,i) e a pluralidade de envelopes de tempo de baixa frequência L(k,i) (etapa S16). Então, a unidade de quantização/codificação 2b quantiza e codifica a informação de envelope de tempo e codifica a informação suplementar para geração de alta frequência (etapa S17).
[110] Adicionalmente, a unidade de construção de sequência codificada de alta frequência 2h constrói uma sequência codificada de alta frequência contendo a informação suplementar codificada para geração de alta frequência e a informação de envelope de tempo quantizada (etapa S18). Então, a unidade de multiplexação 2i gera a sequência codificada pela multiplexação da sequência codificada de baixa frequência e a sequência codificada de alta frequência e envia a sequência codificada gerada (etapa S19).
[111] De acordo com o decodificador de fala 1, o método de decodificação ou o programa de decodificação descrito acima, o sinal de baixa frequência é obtido a partir da sequência codificada pela demultiplexação e decodificação, e a informação suplementar para a geração de alta frequência e a informação de envelope de tempo são obtidas a partir da sequência codificada pela demultiplexação, decodificação e quantização inversa. Então, o componente de frequência alta Xdec(j,i) no domínio da frequência é gerado a partir do sinal de baixa frequência Xdec(j,i) transformado no domínio da frequência utilizando a informação suplementar para geração de alta frequência, e, por outro lado, após a aquisição de uma pluralidade de envelopes de tempo de baixa frequência Ldec(k,i) pela análise do sinal de baixa frequência Xdec(j,i) no domínio da frequência, o envelope de tempo de alta frequência ET(l,i) é calculado utilizando-se a pluralidade de envelopes de tempo de baixa frequência Ldec(k,i) e a informação de envelope de tempo. Adicionalmente, o envelope de tempo do componente de alta frequência XH(j,i) é ajustado pelo envelope de tempo de alta frequência calculado ET(l,i) e o componente de alta frequência ajustado e o sinal de baixa frequência são adicionados juntos e, dessa forma, o sinal de domínio do tempo é enviado. Dessa forma, visto que uma pluralidade de envelopes de tempo de baixa frequência Ldec(k,i) são utilizados para ajuste do envelope de tempo do componente de alta frequência XH(j,i), a forma de onda do envelope de tempo do componente de alta frequência é ajustada com alta precisão pelo uso de correlação entre o envelope de tempo dos componentes de baixa frequência e o envelope de tempo dos componentes de alta frequência. Como resultado disso, o envelope de tempo no sinal decodificado é ajustado em um formato menos distorcido, e, portanto, um sinal reproduzido com menos pré- eco e pós-eco pode ser obtido.
[112] Adicionalmente, de acordo com o codificador de fala 2, o método de codificação ou o programa de codificação descrito acima, o sinal de baixa frequência é obtido pela subamostragem de um sinal de fala, e o sinal de baixa frequência é codificado e, por outro lado, uma pluralidade de envelopes de tempo L(k,i) de componentes de baixa frequência são calculados com base no sinal de fala X(j,i) no domínio da frequência, e a informação de envelope de tempo para aquisição do envelope de tempo dos componentes de alta frequência é calculado utilizando-se os envelopes de tempo L(k,i) dos componentes de baixa frequência. Adicionalmente, a informação suplementar para a geração de alta frequência para geração de componentes de alta frequência a partir do sinal de baixa frequência é calculado, e, depois da informação suplementar para a geração de alta frequência e a informação de envelope de tempo serem quantizadas e codificadas, a sequência codificada de alta frequência contendo a informação suplementar para geração de alta frequência e informação de envelope de tempo é construída. Então, a sequência codificada na qual a sequência codificada de baixa frequência e a sequência codificada de alta frequência são multiplexadas é gerada. De acordo, quando a sequência codificada é registrada no decodificador de fala 1, uma pluralidade de envelopes de tempo de baixa frequência pode ser utilizada para ajuste do envelope de tempo dos componentes de alta frequência no lado do decodificador de fala 1, e, dessa forma, a forma de onda do envelope de tempo dos componentes de alta frequência é ajustada com alta precisão pelo uso da correlação entre o envelope de tempo dos componentes de baixa frequência e o envelope de tempo dos componentes de alta frequência do lado do decodificador de fala 1. Como resultado disso, o envelope de tempo no sinal decodificado é ajustado em um formato menos distorcido, e, portanto, um sinal reproduzido com menos pré-eco e pós-eco pode ser obtido no lado do decodificador. Primeiro Exemplo Ilustrativo do Decodificador de Fala De Acordo com a Primeira Modalidade
[113] A Fig. 5 é um diagrama ilustrando uma configuração de uma parte principal relacionada com o cálculo de envelope em um primeiro exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade, e a Fig. 6 é um fluxograma ilustrando um procedimento de cálculo de envelope pelo decodificador de fala 1 ilustrado na Fig. 5.
[114] O decodificador de fala 1 ilustrado na Fig. 5 inclui uma unidade de controle de cálculo de envelope de tempo (meios de controle de cálculo de envelope de tempo) 1k em adição às unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e a unidade de cálculo de envelope de tempo 1g. A unidade de controle de cálculo de envelope de tempo 1k recebe um sinal de baixa frequência a partir da unidade de banco de filtro de divisão de banda 1c, calcula a energia do sinal de baixa frequência no quadro (etapa S31), e compara a energia calculada ao sinal de baixa frequência com um limite especificado (etapa S32). Quando a energia do sinal de baixa frequência não é maior do que o limite especificado (NÃO na etapa S32), a unidade de controle de cálculo de envelope de tempo 1k envia um sinal de controle de cálculo de envelope de tempo de baixa frequência para as unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e envia um sinal de controle de cálculo de envelope de tempo para a unidade de cálculo de envelope de tempo 1g de modo que o cálculo de envelope de tempo não seja realizado nas unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e a unidade de cálculo de envelope de tempo 1g. Nesse caso, o envelope de tempo do sinal de alta frequência é enviado para a unidade de banco de filtro de síntese de banda 1j sem ser ajustado com base no envelope de tempo descrito acima (por exemplo, na equação 29 acima, E(m,i) é substituído por Ecurr(m,i)), e a equação a seguir: Equação 39
Figure img0034
é utilizada no lugar da equação 30 acima) (Etapa S36). Por outro lado, quando a energia do sinal de frequência baixa é maior do que o limite especificado, a unidade de controle de cálculo de envelope de tempo 1k envia um sinal de controle de cálculo de envelope de tempo de baixa frequência para as unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e envia um sinal de controle de cálculo de envelope de tempo para a unidade de cálculo de envelope de tempo 1g de modo que o cálculo de envelope de tempo seja realizado nas unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e a unidade de cálculo de envelope de tempo 1g. Nesse caso, o sinal de alta frequência cujo envelope de tempo é ajustado pela unidade de ajuste de envelope de tempo 1i com base no envelope de tempo descrito acima é enviado para a unidade de banco de filtro de síntese de banda 1j.
[115] Com referência à Fig. 6, no primeiro exemplo ilustrativo do decodificador de fala 1, o processo de cálculo de envelope ilustrado nas etapas S31 a S36 é executado no lugar do processo nas etapas S07 a S09 do decodificador de fala 1 de acordo com a primeira modalidade ilustrada na Fig. 2.
[116] No primeiro exemplo ilustrativo do decodificador de fala 1 descrito acima, quando a energia do sinal de baixa frequência está abaixo e não utilizado para cálculo do envelope de tempo do sinal de alta frequência, o processo nas etapas S07 a S08 pode ser pulado para reduzir a quantidade de computação.
[117] Note que a unidade de controle de cálculo de envelope de tempo 1k pode calcular a energia de uma parte correspondente aos primeiro a n-ésimo envelopes de tempo de baixa frequência calculados pelas primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn, envia o sinal de controle de cálculo de envelope de tempo de baixa frequência com base em um resultado da comparação da energia calculada correspondendo aos primeiro a n-ésimo envelopes de tempo de baixa frequência com um limite especificado e, dessa forma, controlar se ou não se pula o processamento das primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn.
[118] Nesse caso, quando a unidade de controle de cálculo de envelope de tempo 1k realiza o controle para pular o processamento de todas as primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn, envia o sinal de controle de cálculo de envelope de tempo para a unidade de cálculo de envelope de tempo 1g de modo a pular o processo de cálculo de envelope de tempo. Por outro lado, quando a unidade de controle de cálculo de envelope de tempo 1k realiza o controle de modo que pelo menos uma das primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn realize o processo de cálculo de envelope de tempo de baixa frequência, envia o sinal de controle de cálculo de envelope de tempo para a unidade de cálculo de envelope de tempo 1g de modo a realizar o processo de cálculo de envelope de tempo. Segundo Exemplo Ilustrativo do Decodificador de Fala de Acordo com a Primeira Modalidade
[119] A Fig. 7 é um diagrama ilustrando uma confirmação de uma parte principal relacionada com o cálculo de envelope em um segundo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade, e a Fig. 8 é um fluxograma ilustrando um procedimento de cálculo de envelope pelo decodificador de fala 1 ilustrado na Fig. 7.
[120] O decodificador de fala 1 ilustrado na Fig. 7 inclui uma unidade de controle de cálculo de envelope de tempo (meios de controle de cálculo de envelope de tempo) 1m em adição às unidades e cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e a unidade de cálculo de envelope de tempo 1g. A unidade de controle de cálculo de envelope de tempo 1m envia um sinal de controle de cálculo de envelope de tempo de baixa frequência para as primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn com base na informação de envelope de tempo recebida da unidade de quantização inversa/decodificação de sequência codificada 1e e, dessa forma, controla a execução do cálculo de envelope de tempo de baixa frequência nas primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn.
[121] Para ser específico, no segundo exemplo alternativo do decodificador de fala 1, o processo de cálculo de envelope nas etapas S41 a S48 ilustrados na Fig. 8 é executado no lugar do processo nas etapa S07 a S09 do decodificador de fala 1 de acordo com a primeira modalidade ilustrada na Fig. 2.
[122] Primeiro, a unidade de controle de cálculo de envelope de tempo 1m configura um valor de contagem "count" para 0 (etapa S41). A seguir, a unidade de controle de cálculo de envelope de tempo 1m determina se um coeficiente Al,count+1(s) contido na informação de envelope de tempo recebida a partir da unidade de quantização inversa/decodificação de sequência codificada 1e é igual a 0 ou não (etapa S42).
[123] Como resultado da determinação, quando o coeficiente Al,count+1(s) é igual a 0 (NÃO na etapa S42), a unidade de controle de cálculo de envelope de tempo 1m envia um sinal de controle de cálculo de envelope de tempo de baixa frequência para a unidade de cálculo de envelope de tempo de baixa frequência de contagem 1fcount de modo que cálculo do envelope de tempo de baixa frequência na unidade de cálculo de envelope de tempo de baixa frequência 1fcount não seja realizado e então prossegue para a etapa S44. Por outro lado, quando for determinado que o coeficiente Al,count+1(s) não é igual a 0 (SIM, na etapa S42), a unidade de controle de cálculo de envelope de tempo 1m envia um sinal de controle de cálculo de envelope de tempo de baixa frequência para a unidade de cálculo de envelope de tempo de baixa frequência count 1fcount de modo que o cálculo de envelope de tempo de baixa frequência na unidade de cálculo de envelope de tempo de baixa frequência 1fcount seja realizado. O envelope de tempo de baixa frequência é, dessa forma, calculado pela unidade de cálculo de envelope de tempo de baixa frequência 1fcount (etapa S43).
[124] Adicionalmente, a unidade de controle de cálculo de envelope de tempo 1m incrementa o valor de contagem "count" por 1 (etapa S44). e então compara o valor de contagem "count" com o número n de unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn (etapa S45). Como resultado da comparação, quando o valor de contagem "count" é menor do que o número n (SIM na etapa S45), o processo retorna para a etapa S42 e repete a determinação para o próximo coeficiente Al,count(s) contido na informação de envelope de tempo. Por outro lado, quando o valor de contagem "count" é igual a ou maior do que o número n (NÃO, na etapa S45), o processo prossegue para a etapa S46. Então, a unidade de controle de cálculo de envelope de tempo 1m determina se o cálculo de envelope de tempo de baixa frequência é realizado em uma ou mais unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn (etapa s46). Como resultado da determinação, quando o cálculo de envelope de tempo de baixa frequência não é realizado em qualquer uma das unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn (NÃO, na etapa S46), a unidade de controle de cálculo de envelope de tempo 1m envia o sinal de controle de cálculo de envelope de tempo para a unidade de cálculo de envelope de tempo 1g de modo a pular o processo de cálculo de envelope de tempo. Nesse caso, a etapa S49 é realizada no lugar da etapa S47 para S48 e então o processo prossegue para a etapa S10 (figura 2). Por outro lado, quando o cálculo de envelope de tempo de baixa frequência é realizado em uma ou mais unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn (SIM, na etapa S46), a unidade de cálculo de envelope de tempo 1g realiza o processo de cálculo de envelope de tempo (etapa S47). Então, a unidade de ajuste de envelope de tempo 1i realiza o ajuste do envelope de tempo do sinal de alta frequência (etapa S48). Depois disso, a unidade de banco de filtro de síntese de banda 1j sintetiza o sinal de saída.
[125] Pelo segundo exemplo alternativo do decodificador de fala 1 descrito acima, quando uma parte do processo não é necessária com base na informação de envelope de tempo obtida a partir da sequência codificada, qualquer um dentre o processo nas etapas S07 a S08 pode ser pulado pare reduzir a quantidade de computação. Terceiro Exemplo Alternativo de Decodificador de Fala de Acordo com a Primeira Modalidade
[126] A Fig. 9 é um diagrama ilustrando uma configuração de uma parte principal relacionada com o cálculo de envelope de acordo com um terceiro exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade, e a Fig. 10 é um fluxograma ilustrando um procedimento do cálculo de envelope pelo decodificador de fala 1 ilustrado na Fig. 9.
[127] O decodificador de fala 1 ilustrado na Fig. 9 inclui uma unidade de controle de cálculo de envelope de tempo (meios de controle de cálculo de envelope de tempo) 1n em adição às unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e a unidade de cálculo de envelope de tempo 1g. A unidade de controle de cálculo de envelope de tempo 1n recebe informação de controle de cálculo de envelope de tempo da unidade de análise de sequência codificada 1d. Nesse exemplo alternativo, a informação de controle de cálculo de envelope de tempo descreve se ou não realiza o processo de cálculo de envelope de tempo no quadro. Quando a decodificação e quantização inversa são necessárias quando da leitura da descrição da informação de controle de cálculo de envelope de tempo, a unidade de quantização inversa/decodificação de sequência codificada 1e realiza a decodificação e quantização inversa. Adicionalmente, a unidade de controle de cálculo de envelope de tempo 1n determina se ou não realiza o processo de cálculo de envelope de tempo no quadro por referência à informação de controle de cálculo de envelope de tempo. Quando a unidade de controle de cálculo de envelope de tempo 1n determina não realizar o processo de cálculo de envelope de tempo, a mesma envia um sinal de controle de cálculo de envelope de tempo de baixa frequência para as unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e envia um sinal de controle de cálculo de envelope de tempo para a unidade de cálculo de envelope de tempo 1g de modo que o processo de cálculo de envelope de tempo não seja realizado nas unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e a unidade de cálculo de envelope de tempo 1g. Nesse caso, o sinal de alta frequência é enviado para a unidade de banco de filtro de síntese de banda 1j sem o ajuste de seu envelope de tempo com base no envelope de tempo descrito acima. Por outro lado, quando a unidade de controle de cálculo de envelope de tempo 1n determina a realização do processo de cálculo de envelope de tempo, envia um sinal de controle de cálculo de envelope de tempo de baixa frequência para as unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e envia um sinal de controle de cálculo de envelope de tempo para a unidade de cálculo de envelope de tempo 1g de modo que o processo de cálculo de envelope de tempo seja realizado nas unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e a unidade de cálculo de envelope de tempo 1g. Nesse caso, o sinal de alta frequência é enviado para a unidade de banco de filtro de síntese de banda 1j depois de seu envelope de tempo ser ajustado na unidade de ajuste de envelope de tempo 1i.
[128] Com referência à Fig. 10, no terceiro exemplo ilustrativo do decodificador de fala 1, o processo de cálculo de envelope nas etapas S51 a S54 é executado no lugar do processo das etapas S07 a S09 do decodificador de fala 1 de acordo com a primeira modalidade ilustrada na Fig. 2.
[129] No terceiro exemplo alternativo do decodificador de fala 1 descrito acima também, o processo nas etapas S07 a S08 pode ser pulado com base na informação de controle do codificador para, dessa forma, reduzir a quantidade de computação. Quarto Exemplo Alternativo do Decodificador de Fala de Acordo com a Primeira Modalidade
[130] A Fig. 11 é um fluxograma ilustrando um procedimento do cálculo de envelope por um quarto exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade. Note que a configuração do quarto exemplo alternativo do decodificador de fala 1 é igual à ilustrada na Fig. 9.
[131] No quarto exemplo alternativo, o processo de cálculo de envelope nas etapas S61 a S64 ilustradas na Fig. 11 é executado no lugar o processo nas etapas S07 a S09 do decodificador de fala 1 de acordo com a primeira modalidade ilustrada na Fig. 2.
[132] Especificamente, a informação de controle de cálculo de envelope de tempo descreve o envelope de tempo de baixa frequência a ser utilizado para o cálculo do envelope de tempo no quadro entre os primeiro a n-ésimo envelopes de tempo de baixa frequência. Quando a decodificação e a quantização inversa são necessárias quando da leitura da descrição da informação de controle de cálculo de envelope de tempo, a unidade de quantização inversa e decodificação de sequência codificada 1e realiza a decodificação e quantização inversa. Então, a unidade de controle de cálculo de envelope de tempo 1n seleciona o envelope de tempo de baixa frequência a ser utilizado para o processo de cálculo de envelope de tempo no quadro com base na informação de controle de cálculo de envelope (etapa S61).
[133] Então, a unidade de controle de cálculo de envelope de tempo 1n envia o sinal de controle de cálculo de envelope de tempo de baixa frequência para a primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn. É, dessa forma, controlado de modo que o envelope de tempo de baixa frequência seja calculado pela unidade de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn correspondendo ao envelope de tempo de baixa frequência que é selecionado na seleção acima, e o envelope de tempo de baixa frequência não é calculado pela unidade de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn correspondendo aos envelopes de tempo de baixa frequência que não é selecionado na seleção acima (etapa S62).
[134] Depois disso, a unidade de controle de cálculo de envelope de tempo 1n envia o sinal de controle de cálculo de envelope de tempo para a unidade de cálculo de envelope de tempo 1g de modo que o envelope de tempo seja calculado utilizando o envelope de tempo de baixa frequência selecionado apenas (etapa S63). Adicionalmente, a unidade de ajuste de envelope de tempo 1i ajusta o envelope de tempo do sinal de frequência alta gerado na unidade de geração de alta frequência 1h pela utilização do envelope de tempo calculado (Etapa S64).
[135] Adicionalmente, quando qualquer envelope de tempo de baixa frequência não é selecionado na seleção acima, as etapas S62 e S63 podem ser puladas, e o sinal de alta frequência pode ser enviado para a unidade de banco de filtro de síntese de banda 1j sem ajuste de seu envelope de tempo com base no envelope de tempo descrito acima (etapa S36 na Fig. 6).
[136] No quarto exemplo alternativo do decodificador de fala 1 descrito acima também, o processo nas etapas S07 e S08 pode ser pulado com base na informação de controle do codificador para, dessa forma, reduzir a quantidade de computação. Quinto Exemplo Alternativo de Decodificador de Fala de Acordo com a Primeira Modalidade
[137] A Fig. 12 é um fluxograma ilustrando um procedimento de cálculo de envelope por um quinto exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade. Note que a configuração do quinto exemplo alternativo do decodificador de fala 1 é igual ao ilustrado na Fig. 9.
[138] No quinto exemplo alternativo, o processo de cálculo de envelope nas etapas S71 a S75 ilustrados na Fig. 12 é executado no lugar do processo nas etapas S07 a S09 do decodificador de fala 1 de acordo com a primeira modalidade ilustrada na Fig. 2.
[139] Especificamente, a informação de controle de cálculo de envelope de tempo descreve um método de cálculo do primeiro ao n-ésimo envelopes de tempo de baixa frequência no quadro. Quando a decodificação e quantização inversa são necessárias quando da leitura da descrição da informação de controle de cálculo de envelope de tempo, a unidade de quantização inversa e decodificação de sequência codificada 1e realiza a decodificação e a quantização inversa. O método de cálculo do primeiro e n-ésimo envelopes de tempo de baixa frequência descrito na informação de controle de cálculo de envelope de tempo pode ser relacionado com conteúdo para configurar os conjuntos Bl e Bh representando as sub-bandas, por exemplo, e a faixa de frequência da subbanda pode ser controlada com base na informação de controle de cálculo de envelope de tempo. O conteúdo relacionado com a configuração dos conjuntos Bl a Bh pode ser relacionado com descrição para seleção a partir de uma pluralidade de conteúdos especificados da configuração dos conjuntos Bl a Bh. Nesse exemplo alternativo, um método de descrição do conteúdo relacionado com a configuração dos conjuntos Bl e Bh não é particularmente limitado. Adicionalmente, um método de cálculo dos primeiro e nos envelopes de tempo de baixa frequência descritos na informação de controle de cálculo de envelope de tempo pode ser relacionado com conteúdo para configurar o processamento especificado (por exemplo, o conteúdo relacionado com a configuração do coeficiente de suavização sc(j) descrito acima), e o processamento especificado (por exemplo, a suavização) pode ser, dessa forma, controlada com base na informação de controle de cálculo de envelope de tempo. O conteúdo relacionado com a configuração do coeficiente de suavização sc(j) pode ser um resultado da quantização e codificação do valor do coeficiente de suavização sc(j) ou pode ser o conteúdo relacionado com a seleção de qualquer um dentre uma pluralidade de coeficientes de suavização especificados sc(j). Adicionalmente, pode incluir a descrição quanto ao fato de se ou não realiza a suavização. Nesse exemplo alternativo, um método de descrição do conteúdo relacionado com a configuração do processamento especificado (por exemplo, a configuração do coeficiente de suavização sc(j) descrito acima) não é particularmente limitado. Adicionalmente, um método de cálculo do primeiro ao n-ésimo envelopes de tempo de baixa frequência descrito na informação de controle de cálculo de envelope de tempo pode incluir pelo menos um dos métodos de cálculo acima. Note que, nesse exemplo alternativo, um método de cálculo do primeiro ao n-ésimo envelopes de tempo de baixa frequência descritos na informação de controle de cálculo de envelope de tempo não é limitado à descrição acima desde que o conteúdo relacionado com um método de cálculo do envelope de tempo de baixa frequência seja descrito.
[140] Na etapa S71, a unidade de controle de cálculo de envelope de tempo 1n determina se ou não uma mudança no método de cálculo do envelope de tempo de baixa frequência no quadro com base na informação de controle de cálculo de envelope de tempo. Quando for determinada não mudança do método de cálculo do envelope de tempo de baixa frequência (NÃO na etapa S71), a primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn calcula os primeiro a n-ésimo envelopes de tempo de baixa frequência sem alterar o método de cálculo do envelope de tempo de baixa frequência (etapa S73). Por outro lado, quando for determinada a alteração do método de cálculo do envelope de tempo de baixa frequência (SIM na etapa S71), a unidade de controle de cálculo de envelope de tempo 1n envia o sinal de controle de cálculo de envelope de tempo de baixa frequência para as primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e, dessa forma, instrui o método de cálculo do envelope de tempo de baixa frequência, de modo que o método de cálculo do envelope de tempo de baixa frequência seja alterado (etapa S72). Depois disso, a primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn calculam os primeiro a n-ésimo envelopes de tempo de baixa frequência pelo método de cálculo de envelope de tempo de baixa frequência alterado (etapa S73). Adicionalmente, a unidade de cálculo de envelope de tempo 1g calcula o envelope de tempo pela utilização dos primeiro a n-ésimo envelopes de tempo de frequência baixa calculados pelas primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn (etapa S74). Então, a unidade de ajuste de envelope de tempo 1i ajusta o envelope de tempo do sinal de alta frequência gerado na unidade de geração de alta frequência 1y pela utilização do envelope de tempo calculado na unidade de cálculo de envelope de tempo 1g (etapa S75).
[141] No quinto exemplo alternativo do decodificador de fala 1 descrito acima também, o processo nas etapas S07 a S08 pode ser controlado com precisão com base na informação de controle do codificador, permitindo, assim, um ajuste altamente preciso do envelope de tempo. Sexto Exemplo Alternativo do Decodificador de Fala de Acordo com a Primeira Modalidade
[142] A Fig. 13 é um diagrama ilustrando uma configuração de uma parte principal relacionada com o cálculo de envelope em um exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade. O decodificador de fala 1 ilustrado na Fig. 13 inclui uma unidade de controle de cálculo de envelope de tempo (meios de controle de cálculo de envelope de tempo) 1o em adição às unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e a unidade de cálculo de envelope de tempo 1g. A unidade de controle de cálculo de envelope de tempo 1o é configurada para realizar qualquer um ou mais dos processos de cálculo de envelope nos primeiro a quinto exemplos alternativos do decodificador de fala 1. Sétimo Exemplo Alternativo do Decodificador de Fala de Acordo com a Primeira Modalidade
[143] A Fig. 14 é um fluxograma ilustrando um procedimento de cálculo de envelope por um sétimo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade. Note que a configuração do sétimo exemplo alternativo do decodificador de fala 1 é igual ao decodificador de fala 1 de acordo com a primeira modalidade. As etapas S261 a S262 na Fig. 14 substituem S08 no fluxograma da Fig. 2 ilustrando o processo de decodificador de fala 1 de acordo com a primeira modalidade.
[144] Nesse exemplo alternativo, a unidade de cálculo de envelope de tempo 1g realiza o processamento especificado (processamento da etapa S261) utilizando o envelope de tempo de baixa frequência Ldec(k,i) {1<k<n, t(s)<i<t(s+1), 0<S<SE} suprido a partir das unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e a informação de envelope de tempo suprida a partir da unidade de quantização inversa e decodificação de sequência codificada 1e e então calcule o envelope de tempo (processamento da etapa S262). Exemplos do processamento especificado e cálculo do envelope de tempo relacionado com o mesmo são como segue.
[145] No primeiro exemplo, o coeficiente Al,k(s) na equação 18, 21, 23 ou 24 é calculado utilizando a informação de envelope de tempo suprida em outra forma a partir da unidade de quantização inversa e decodificação de sequência codificada 1e. Por exemplo, o coeficiente é calculado pela equação a seguir. Equação 40
Figure img0035
onde ak(s), k=1,2,...,Num, 0<S<SE é a informação de envelope de tempo suprida a partir da unidade de quantização inversa e decodificação de sequência codificada 1e, e Flk(x1, x2,...,xnum), 1<l<nH, 1<k<n é uma função especificada com número Num de variáveis como argumentos. Depois disso, a utilização do coeficiente Al,k(s) adquirido no método acima, o envelope de tempo é calculado pela equação 18, 21, 23 ou 24.
[146] No segundo exemplo, a quantidade fornecida pela equação a seguir é calculada primeiro. Equação 41
Figure img0036
[147] Note que a equação a seguir: Equação 42
Figure img0037
é um coeficiente especificado.
[148] Adicionalmente, g(0)(l,i) acima pode ser um coeficiente especificado, ou uma função especificada para o índice l, i. Por exemplo, g(0)(l,i) pode ser uma função fornecida pela equação a seguir. Equação 43
Figure img0038
[149] Então, a quantidade correspondente ao lado esquerdo da equação 18, 21, 23 ou 24 é calculada, e o resultado é representado como g(1)(l,i) {1<l<nH, t(s)<i<t(s+1), 0<S<SE}. Então, o envelope de tempo é calculado pela equação a seguir, por exemplo. Equação 44
Figure img0039
[150] Adicionalmente, o envelope de tempo pode ser calculado pela equação a seguir. Equação 45
Figure img0040
[151] Adicionalmente, o envelope de tempo pode ser calculado pela equação a seguir. Equação 46
Figure img0041
[152] Quando a informação de envelope de tempo não é suprida a partir da unidade de quantização inversa e decodificação de sequência codificada 1e, o envelope de tempo pode ser calculado pela seguinte equação. Equação 47
Figure img0042
[153] Nesse exemplo alternativo, a forma de gdec(l,i) não é limitada ao exemplo acima.
[154] Note que, na presente invenção, o processamento especificado e o cálculo do envelope de tempo relacionado com o mesmo não são limitados aos exemplos acima.
[155] Esse exemplo alternativo pode ser aplicado aos primeiro a sexto exemplos alternativos do decodificador de fala 1 de acordo com a primeira modalidade como segue.
[156] No caso de aplicação ao primeiro exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade, etapa S34 na Fig. 6 é substituída pelas etapas S261 a S262 na Fig. 14, por exemplo. Uma pluralidade de tipos de processamento especificado descrito acima pode ser preparada de antemão e alterada dependendo da energia do sinal de baixa frequência. Adicionalmente, qualquer um dentre (a) cálculo do envelope de tempo pela realização do processamento especificado descrito acima apenas, (b) cálculo do envelope de tempo pela realização do processamento especificado descrito acima e adicionalmente pela utilização da informação de envelope de tempo e (c) cálculo do envelope de tempo pela utilização da informação de envelope de tempo sem a realização do processamento especificado descrito acima pode ser selecionado dependendo da energia do sinal de frequência baixa.
[157] A Fig. 15 é um fluxograma ilustrando uma parte do processamento da unidade de controle de cálculo de envelope de tempo 1m quando o sétimo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade é aplicado ao segundo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade.
[158] No caso de aplicação ao segundo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade, a etapa S42 na Fig. 8 é substituída pela etapa 271 na Fig. 14, e a etapa S47 na Fig. 8 é substituída pelas etapas S261 e S262 na Fig. 14, por exemplo. Uma pluralidade de tipos de processamento especificado descrito acima pode ser preparada antecipadamente e alterada dependendo da informação de envelope de tempo. Adicionalmente, qualquer um dentre (a) cálculo do envelope de tempo pela realização do processamento especificado descrito acima apenas, (b) cálculo do envelope de tempo pela realização do processamento especificado descrito acima e utilização adicional da informação de envelope de tempo e(c) cálculo do envelope de tempo pela utilização da informação de envelope de tempo sem a realização do processamento especificado descrito acima pode ser selecionado dependendo da informação de envelope de tempo.
[159] No caso de aplicação ao terceiro exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade, a etapa S53 na Fig. 10 é substituída pelas etapas S261 a S262 da Fig. 14. Uma pluralidade de tipos de processamento especificado descrito acima pode ser preparada de antemão e alterada dependendo da informação de controle de cálculo de envelope de tempo. Adicionalmente, qualquer um dentre (a) cálculo de envelope de tempo pela realização do processamento especificado descrito acima apenas, (b) cálculo do envelope de tempo pela realização do processamento especificado descrito acima e utilização adicional da informação de envelope de tempo e (c) cálculo do envelope de tempo pela utilização da informação de envelope de tempo sem a realização do processamento especificado descrito acima pode ser selecionado dependendo da informação de controle de cálculo de envelope de tempo.
[160] A Fig. 16 é um fluxograma ilustrando uma parte do processamento da unidade de controle de cálculo de envelope de tempo 1n quando o sétimo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade é aplicado ao quarto exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade.
[161] No caso de aplicação ao quarto exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade, a etapa S261 da Fig. 11 é substituída pela etapa 281 da Fig. 16, e a etapa S63 na Fig. 11 é substituída pelas etapa S261 a S262 da Fig. 14. Na etapa 281 na Fig. 16, como o método de seleção do envelope de tempo dos componentes de baixa frequência a serem calculados a partir dos primeiro a n-ésimo envelopes de tempo de baixa frequência, pode ser examinado se A(0)l,k em um exemplo do processamento especificado descrito acima é igual a zero ou não e, a unidade de cálculo de envelope de tempo de sinal de baixa frequência 1fk pode calcular Ldec(k,i) quando A(0)l,k não é igual a zero e é direcionado para calcular Ldec(k,i) na unidade de cálculo de envelope de tempo de sinal de baixa frequência 1fk na informação de controle de cálculo de envelope de tempo.
[162] No caso de aplicação ao quinto exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade, a etapa S74 na Fig. 12 é substituída por etapas S261 a S262 na Fig. 14. Quando o método de cálculo do envelope de tempo de componentes de baixa frequência é alterado, o método de processamento descrito acima pode ser alterado de acordo.
[163] Adicionalmente, a aplicação do sexto exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade é feita de acordo com a forma de aplicação aos primeiro a quinto exemplos alternativos descritos acima.
[164] Note que, apesar de o fluxo que calcula o envelope de tempo depois da realização do processamento especificado ser ilustrado na figura 14, o processamento especificado pode ser realizado depois do cálculo do envelope de tempo. Por exemplo, o processamento especificado tal como suavização pode ser realizado no envelope de tempo calculado. Adicionalmente, o envelope de tempo pode ser calculado depois da realização do processamento especificado, e adicionalmente outro processamento especificado pode ser realizado nesse envelope de tempo. Primeiro Exemplo Alternativo de Codificador de Fala de Acordo com a Primeira Modalidade
[165] A Fig. 17 é um diagrama ilustrando uma configuração de um primeiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade, e a Fig. 18 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 2 ilustrado na Fig. 17.
[166] No codificador de fala 2 ilustrado na Fig. 17, uma unidade de geração de informação de controle de cálculo de envelope de tempo (meios de geração de informação de controle) 2j é adicionada ao codificador de fala 2 de acordo com a primeira modalidade.
[167] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j gera uma informação de controle de cálculo de envelope de tempo utilizando pelo menos um dentre o sinal X(j,i) no domínio da frequência recebido da unidade de banco de filtro de divisão de banda 2c, e a informação de envelope de tempo recebida a partir da unidade de cálculo de informação de envelope de tempo 2f. A informação de controle de cálculo de envelope de tempo gerada pode ser qualquer informação de controle de cálculo de envelope de tempo nos terceiro a sétimo exemplos alternativos do decodificador de fala 1 de acordo com a primeira modalidade.
[168] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode calcular a energia de sinal na banda de frequência correspondendo ao sinal de frequência baixa do sinal X(j,i) no domínio da frequência recebido da unidade de banco de filtro de divisão de banda 2c, por exemplo, e gera a informação de controle de cálculo de envelope de tempo indicando se ou não realiza o cálculo de envelope de tempo no decodificador de fala 1 de acordo com a energia de sinal calculado.
[169] Alternativamente, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode calcular a energia de sinal na banda de frequência correspondendo ao sinal de alta frequência do sinal X(j,i) no domínio da frequência e gera a informação de controle de cálculo de envelope de tempo indicando se ou não realiza o cálculo do envelope de tempo no decodificador de fala 1 de acordo com a energia de sinal calculada.
[170] Adicionalmente, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode calcular a energia de sinal na banda de frequência correspondente a todo o sinal de frequência (isto é, a banda de frequência correspondente ao sinal de baixa frequência e a banda de frequência correspondente ao sinal de alta frequência) do sinal X(j,i) no domínio da frequência e gerar a informação de controle de cálculo de envelope de tempo indicando se ou não realiza o cálculo de envelope de tempo no decodificador de acordo com a energia de sinal calculada.
[171] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode calcular a energia de uma parte correspondente aos primeiro a n-ésimo envelopes de tempo de baixa frequência calculados pelas primeira a n unidades de cálculo de envelope de tempo de baixa frequência 2e1 a 2en, e gerar a informação de controle de cálculo de envelope de tempo relacionada com a seleção de envelope de tempo de baixa frequência a ser utilizado para o cálculo de envelope de tempo no decodificador de fala 1 de acordo com a energia do sinal calculado.
[172] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode calcular a energia de sinal na banda de frequência correspondendo ao sinal de baixa frequência do sinal X(j,i) no domínio da frequência e gerar a informação de controle de cálculo de envelope de tempo relacionada com o método de cálculo de envelope de tempo de baixa frequência no decodificador de fala 1 de acordo com a energia de sinal calculada.
[173] Nesse exemplo alternativo, a banda de frequência da energia de sinal a ser calculada não é particularmente limitada, e a informação de controle de cálculo de envelope de tempo que é gerada de acordo com a energia de sinal calculada pode ser qualquer uma ou ais dentre a informação de controle de cálculo de envelope de tempo nos terceiro a sétimos exemplos alternativos do decodificador de fala 1 de acordo com a primeira modalidade descrita acima.
[174] Adicionalmente, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode detectar ou medir as características de sinal do sinal X(j,i) no domínio da frequência, e gerar a informação de controle de cálculo de envelope de tempo indicando se ou não realiza o cálculo de envelope de tempo no decodificador de fala 1 de acordo com as características de sinal calculadas.
[175] Alternativamente, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar informação de controle de cálculo de envelope de tempo relacionada com a seleção do envelope de tempo de baixa frequência a ser utilizado para o cálculo de envelope de tempo no decodificador de fala 1 de acordo com as características de sinal do sinal X(j,i) no domínio da frequência.
[176] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar a informação de controle de cálculo de envelope de tempo relacionada com o método de cálculo de envelope de tempo de baixa frequência no decodificador de fala 1 de acordo com as características de sinal do sinal X(j,i) no domínio da frequência.
[177] Note que as características de sinal detectadas ou medidas na unidade de geração de informação de controle de cálculo de envelope 2j podem ser as características relacionadas com a inclinação da borda de subida ou borda de descida do sinal. As características de sinal podem ser as características relacionadas com a constância do sinal. As características do sinal podem ser as características relacionadas com a intensidade da tonalidade do sinal. Adicionalmente, as características de sinal podem ser pelo menos uma das características acima.
[178] Nesse exemplo alternativo, as características de sinal a ser detectado ou medido não são particularmente limitadas, e a informação de controle de cálculo de envelope de tempo que é gerada de acordo com as características de sinal detectadas ou medidas podem ser qualquer uma ou mais da informação de controle de cálculo de envelope de tempo nos terceiro a sexto exemplos alternativos do decodificador de fala 1 de acordo com a primeira modalidade descrita acima.
[179] Adicionalmente, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar a informação de controle de cálculo de envelope de tempo indicando se ou não realiza o cálculo de envelope de tempo no decodificador de fala 1 de acordo com o valor da informação de envelope de tempo Ai,k(s) (1<l<nH, 1<k<n, 0<S<SE) recebida da unidade de cálculo de informação de envelope de tempo 2f, por exemplo. A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar informação de controle de cálculo de envelope de tempo relacionada com a seleção do envelope de tempo de baixa frequência a ser utilizado para o cálculo de envelope de tempo no decodificador de fala 1. A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar a informação de controle de cálculo de envelope de tempo relacionada com o método de cálculo de envelope de tempo de baixa frequência no decodificador de fala 1.
[180] Nesse exemplo alternativo, a informação de controle de cálculo de envelope de tempo que é gerada de acordo com a informação de envelope de tempo pode ser qualquer uma ou mais da informação de controle de cálculo de envelope de tempo nos terceiro a sexto exemplos alternativos do decodificador de fala 1 de acordo com a primeira modalidade descrita acima.
[181] Alternativamente, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar a informação de controle de cálculo de envelope de tempo indicando se ou não realiza o cálculo de envelope de tempo no decodificador de fala 1 pela utilização de sinal X(j,i) no domínio da frequência recebido da unidade de banco de filtro de divisão de banda 2c e sequência codificada da informação suplementar para geração de alta frequência recebida da unidade de quantização e codificação 2g, por exemplo. A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar a informação de controle de cálculo de envelope de tempo relacionada com a seleção do envelope de tempo de baixa frequência a ser utilizada para o cálculo de envelope e tempo no decodificador de fala 1. A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar a informação de controle de cálculo de envelope de tempo relacionada com o método de cálculo de envelope de tempo de baixa frequência no decodificador de fala 1.
[182] Para ser específico, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode decodificar e quantizar de forma inversa a sequência codificada da informação suplementar para geração de alta frequência recebida da unidade de quantização e codificação 2g e, dessa forma obtém informação suplementar decodificada localmente para geração de alta frequência, e então gera um pseudo sinal de alta frequência decodificado localmente pela utilização da informação suplementar decodificada localmente para geração de alta frequência e o sinal X(j,i) no domínio da frequência. O pseudo sinal de frequência alta decodificado localmente pode ser gerado pela realização do mesmo processamento que a unidade de geração de alta frequência 1h do decodificador de fala 1 de acordo com a primeira modalidade. A unidade de geração de informação de controle de cálculo de envelope de tempo 2j compara o pseudo sinal de alta frequência decodificado localmente gerado com a banda de frequência correspondendo ao sinal de alta frequência do sinal X(j,i) no domínio da frequência e gera a informação de controle de cálculo de envelope de tempo com base no resultado da comparação.
[183] A comparação entre o pseudo sinal de alta frequência decodificado localmente e a banda de frequência correspondente ao sinal de frequência alta do sinal X(j,i) no domínio da frequência pode ser realizada pelo cálculo de um sinal diferencial de dois sinais e com base na energia do sinal diferencial. Adicionalmente, pode ser feito pelo cálculo de envelopes de tempo do pseudo sinal de frequência alta decodificados localmente e a banda de frequência correspondente ao sinal de alta frequência do sinal X(j,i) no domínio da frequência e com base pelo menos em uma diferença dos envelopes de tempo e uma amplitude da diferença.
[184] Alternativamente, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar a informação de controle de cálculo de envelope de tempo indicando se ou não realiza o cálculo de envelope de tempo no decodificador de fala 1 pela utilização do sinal X(j,i) no domino de frequência recebido a partir da unidade de banco de filtro de divisão de banda 2c, a informação de envelope de tempo recebida da unidade de cálculo d informação de envelope de tempo 2f, e a sequência codificada da informação suplementar para geração de alta frequência recebida da unidade de quantização e codificação 2g. A unidade de geração de informação d controle de cálculo de envelope de tempo 2j pode gerar a informação de controle de cálculo de envelope de tempo relacionada com a seleção do envelope de tempo de baixa frequência a ser utilizado para o cálculo do envelope de tempo no decodificador de fala 1. A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar a informação de controle de cálculo de envelope de tempo relacionada com o método de cálculo de envelope de tempo de baixa frequência no decodificador de fala 1.
[185] Para ser específico, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar um pseudo sinal de frequência alta decodificado localmente e ajustar o envelope de tempo do pseudo sinal de alta frequência decodificado localmente pela utilização da informação de envelope de tempo recebida da unidade de cálculo de informação de envelope de tempo 2f, e então comparar o pseudo sinal de alta frequência decodificado localmente com o envelope de tempo ajustado com a banda de frequência correspondente ao sinal de alta frequência do sinal X(j,i) no domínio da frequência e gerar a informação de controle de cálculo de envelope de tempo com base no resultado da comparação.
[186] A comparação entre o pseudo sinal de frequência alta decodificado localmente com o envelope de tempo ajustado e a banda de frequência correspondendo ao sinal de alta frequência do sinal X(j,i) no domínio da frequência pode ser realizada da mesma forma que a comparação entre o pseudo sinal de frequência alta decodificado localmente e a banda de frequência correspondente ao sinal de alta frequência do sinal X(j,i) no domínio da frequência.
[187] Adicionalmente, na unidade de cálculo de informação de envelope de tempo 2f do codificador de fala 2 de acordo com a primeira modalidade, a informação de envelope de tempo pode ser calculada utilizando-se o pseudo sinal de frequência alta decodificado localmente. Para ser específico, a sequência codificada da informação suplementar para geração de alta frequência recebida da unidade de quantização e codificação 2g é adicionalmente registrado na unidade de cálculo de informação de envelope de tempo 2f, e a sequência codificada da informação suplementar para geração de alta frequência é decodificada e quantizada de forma inversa para aquisição de informação suplementar decodificada localmente para geração de alta frequência, e o pseudo sinal de alta frequência decodificado localmente é gerado utilizando-se informação suplementar decodificada localmente para geração de alta frequência e o sinal X(j,i) no domínio da frequência.
[188] Por exemplo, a unidade de cálculo de informação de envelope de tempo 2f pode enviar a informação de envelope de tempo que permite a aproximação da banda de frequência correspondente ao sinal de alta frequência do sinal X(j,i) no domínio da frequência como a informação de envelope de tempo calculada quando o envelope de tempo do pseudo sinal de alta frequência decodificado localmente é ajustada utilizando o envelope de tempo calculado a partir da informação de envelope de tempo. A determinação quanto ao fato de se está perto da banda de frequência correspondente ao sinal de alta frequência do sinal X(j,i) no domínio da frequência pode ser feia com base em um sinal diferencial entre o pseudo sinal de alta frequência decodificado localmente com o envelope de tempo ajustado e a banda de frequência correspondente ao sinal de alta frequência do sinal X(j,i) no domínio da frequência, ou pode ser baseada em um erro entre os envelopes de tempo desses sinais.
[189] Alternativamente, a unidade de geração de informação de controle de cálculo de envelope 2j pode gerar a informação de controle de cálculo de envelope de tempo indicando se ou não realiza o cálculo de envelope de tempo no decodificador de fala 1 de acordo com a quantidade de informação (para ser mais específico, o número de bits) necessária para codificar a informação de envelope de tempo recebida da unidade de quantização e codificação 2g, por exemplo. A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar a mesma informação de controle de cálculo de envelope de tempo relacionada com a seleção do envelope de tempo de baixa frequência a ser utilizado para o cálculo do envelope de tempo no decodificador de fala 1. A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar a informação de controle de cálculo de envelope de tempo relacionada com o método de cálculo de envelope de tempo de baixa frequência no decodificador de fala 1.
[190] Para ser específico, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j gera a informação de controle de cálculo de envelope de tempo indicando a realização do cálculo de envelope de tempo no decodificador de fala 1 quando a quantidade de informação (para ser mais específico, o número de bits) necessária para codificação da informação de envelope de tempo recebida da unidade de quantização e codificação 2g é igual a ou menor do que um limite especificado, por exemplo. Por outro lado, quando a quantidade de informação necessária para a codificação da informação de envelope de tempo é maior do que um limite especificado, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j gera a informação de controle de cálculo de envelope de tempo indicando a não realização do cálculo de envelope de tempo no decodificador de fala 1.
[191] Adicionalmente, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode gerar informação de controle de cálculo de envelope de tempo relacionada com a seleção do envelope de tempo de baixa frequência a ser utilizada para o cálculo de envelope de tempo no decodificador de fala 1 de modo que a quantidade de informação necessária para codificação da informação de envelope de tempo seja igual a ou inferior a um limite especificado. Nesse momento, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode notificar um resultado da comparação da quantidade de informação necessária para codificação da informação de envelope de tempo com o limite para a unidade de cálculo de informação de envelope de tempo 2f, e a unidade de cálculo de informação de envelope de tempo 2f pode recalcular a informação de envelope de tempo de acordo com o resultado da comparação notificada. Note que, no caso onde a informação de envelope de tempo é recalculada, a unidade de quantização e codificação 2g codifica e quantifica a informação de envelope de tempo recalculada. O número de vezes de novo cálculo da informação de envelope de tempo não é particularmente limitado.
[192] Nesse exemplo alternativo, a informação de controle de cálculo de envelope de tempo é calculada com base na quantidade de informação necessária para a codificação da informação de envelope de tempo, e a informação de controle de cálculo de envelope de tempo a ser gerada pode ser uma ou mais informação de controle de cálculo de envelope de tempo nos terceiro a sexto exemplos alternativos do decodificador de fala 1 de acordo com a primeira modalidade descrita acima.
[193] A informação de controle de cálculo de envelope de tempo gerada pela unidade de geração de informação de controle de cálculo de envelope de tempo 2j da forma acima é adicionalmente somada à sequência codificada de alta frequência pela unidade de construção de sequência codificada de alta frequência 2h e, dessa forma, a sequência codificada de alta frequência é construída. Segundo Exemplo Alternativo de Codificador de Fala de Acordo com a Primeira Modalidade
[194] A Fig. 19 é um diagrama ilustrando uma configuração de um segundo exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade, e a Fig. 20 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 2 ilustrado na Fig. 19.
[195] No codificador de fala 2 ilustrado na Fig. 19, uma unidade de decodificação de baixa frequência 2k é adicionada ao codificador de fala 2 de acordo com a primeira modalidade.
[196] A unidade de decodificação de baixa frequência 2k recebe a sequência codificada de baixa frequência a partir da unidade de codificação de baixa frequência 2b, decodifica e quantiza de forma inversa a sequência codificada de baixa frequência e, dessa forma, adquire um sinal de frequência baixa localmente decodificado. Note que, quando o sinal de frequência baixa quantizado pode ser adquirido a partir da unidade de codificação de baixa frequência 2b, a unidade de decodificação de baixa frequência 2k pode quantizar de forma inversa o sinal de frequência baixa quantizado e, dessa forma, adquirir o sinal de frequência baixa decodificado localmente. Então, as unidades de cálculo de envelope de tempo de baixa frequência 2e1 a 2en calculam os primeiro a n-ésimo envelopes de tempo de baixa frequência pela utilização do sinal de baixa frequência decodificado localmente adquirido pela unidade de decodificação de baixa frequência 2k.
[197] Note que o segundo exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade pode ser aplicado também ao primeiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade. Terceiro Exemplo Alternativo do Codificador de Fala de Acordo com a Primeira Modalidade
[198] A Fig. 21 é um diagrama ilustrando uma configuração de um terceiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade, e a Fig. 22 é um fluxograma ilustrando um procedimento da codificação de fala pelo codificador de fala 2 ilustrado na Fig. 21.
[199] O codificador de fala 2 ilustrado na Fig. 21 é diferente do codificador de fala 2 de acordo com a primeira modalidade pelo fato de incluir uma unidade de banco de filtro de síntese de banda 2m no lugar da unidade de subamostragem 2a.
[200] A unidade de banco de filtro de síntese de banda 2m recebe o sinal X(j,i) no domínio da frequência a partir da unidade de banco de filtro de divisão de banda 2c, realiza síntese de banda para a banda de frequência correspondendo ao sinal de baixa frequência e, dessa forma, adquire um sinal subamostrado. A aquisição do sinal subamostrado pela síntese de banda pode ser realizada de acordo com o método do banco de filtro de síntese subamostrado em SBR de "MPEG4 AAC" especificado em "ISO/IEC 14496-3", por exemplo, ("ISO/IEC 14496-3 subparte 4 Codificação de Áudio Geral").
[201] Note que o terceiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade pode ser aplicado também aos primeiro e segundo exemplos alternativos do codificador de fala 2 de acordo com a primeira modalidade.
[202] Em um quarto exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade, o processamento especificado correspondente ao sétimo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade descrita acima é realizado quando do cálculo g(l,i) na unidade de cálculo de informação de envelope de tempo 2f do codificador de fala 2 de acordo com a primeira modalidade. Note que, como descrito no sétimo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade, g(l,i) pode ser calculado utilizando o envelope de tempo de baixa frequência depois da realização do processamento especificado, ou g(l,i) pode ser calculado pela realização do processamento especificado depois do cálculo de g(l,i) utilizando o envelope de tempo de baixa frequência.
[203] Note que o quarto exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade pode ser aplicado também aos primeiro a terceiro exemplos alternativos do codificador de fala 2 de acordo com a primeira modalidade.
[204] No caso de aplicação de quatro exemplos alternativos do codificador de fala 2 de acordo com a primeira modalidade para o primeiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade, a informação quanto ao fato de ou não se realiza o processamento especificado descrito acima no decodificador de fala 1 de acordo com a primeira modalidade pode ser contido na informação de controle de cálculo de envelope de tempo com base em um erro de g(l,i) com relação a H(l,i) descrito acima. Segunda Modalidade
[205] Uma segunda modalidade da presente invenção é descrita abaixo.
[206] A Fig. 23 é um diagrama ilustrando uma configuração do decodificador de fala 101 de acordo com a segunda modalidade, e a Fig. 24 é um fluxograma ilustrando um procedimento de decodificação de fala pelo decodificador de fala 101 ilustrado na Fig. 23. O decodificador de fala 101 da Fig. 23 é diferente do decodificador de fala 1 de acordo com a primeira modalidade pelo fato de incluir adicionalmente uma unidade de sobreposição de envelope de frequência (meios de sobreposição de envelope de frequência) 1q e incluir uma unidade de ajuste de envelope de frequência e tempo (meios de ajuste de envelope de frequência e tempo) 1p no lugar da unidade de ajuste de envelope de tempo 1i (1c a 1e, 1h, 1j e 1p são algumas vezes referidos também como uma unidade de extensão de banda (meios de extensão de banda)).
[207] A unidade de análise de sequência codificada 1d analisa a sequência codificada de alta frequência suprida a partir da unidade de demultiplexação 1a e, dessa forma, adquire informação suplementar codificada para geração de alta frequência e informação de envelope de frequência e tempo quantizada.
[208] A unidade de decodificação de sequência codificada e quantização inversa 1e decodifica a informação suplementar codificada para geração de alta frequência suprida a partir da unidade de análise de sequência codificada 1d e, dessa forma, obtém informação suplementar para a geração de alta frequência, e quantiza de forma inversa a informação de envelope de frequência e tempo quantizada suprida a partir da unidade de análise de sequência codificada 1d e, dessa forma, adquire informação de envelope de frequência e tempo.
[209] A unidade de sobreposição de envelope de frequência 1q recebe um envelope de tempo ET(l,i) da unidade de cálculo de envelope de tempo 1g e informação de envelope de frequência a partir da unidade de quantização inversa e decodificação de sequência codificada 1e. Então, a unidade de sobreposição de envelope de frequência 1q calcula um envelope de frequência da informação de envelope de frequência e sobrepõe o envelope de frequência no envelope de tempo. Especificamente, a unidade de sobreposição de envelope de frequência 1q realiza esse processamento no procedimento a seguir, por exemplo.
[210] Primeiro, a unidade de sobreposição de envelope de frequência 1q transforma o envelope de tempo pela equação a seguir. Equação 48
Figure img0043
[211] A seguir, a unidade de sobreposição de envelope de frequência 1q divide a banda de alta frequência em mH(mH>1) sub-bandas. As sub-bandas são representadas como B(F)k (k = 1, 2, 3,...,mH). Adicionalmente, para simplificação da descrição, um conjunto GH possuindo mH+1 índices representando o limite da sub-banda B(F)k (1<k<mH) como fatores é definido de modo que o sinal XH(j,i), GH(k)<j<GH(k+1), t(s)<i<t(s+1), 0<s<SE corresponde ao componente da sub-banda B(F)k. Note que GH(1)=kx, GH(mH+1)=kmax+1.
[212] Então, a unidade de sobreposição de envelope de frequência 1a calcula o envelope de frequência pela equação a seguir. Equação 49
Figure img0044
onde sfdec(k,s) (onde 1<k<mH, 0<s<sE) é um fator de escalonamento correspondente à sub-banda B(F)k.
[213] Note que o envelope de frequência pode ser calculado pela equação a seguir. Equação 50
Figure img0045
[214] Nessa modalidade, a forma de EF,dec(k,s) não está limitada ao exemplo acima.
[215] A unidade de sobreposição de envelope de frequência 1q calcula sfdec(k,s) como segue. Primeiro, os valores de sfdec(k,s) correspondendo a várias sub-bandas são determinados como números constantes que não são dependentes do tempo como representado pela equação a seguir (doravante, um conjunto de índices k correspondentes a essas sub-bandas é denotado NC). Equação 51
Figure img0046
[216] Apesar de o valor de C poder ser C=0, o valor de C não é especificado nessa modalidade. Então, quando o inteiro 1 não está incluído no conjunto Nc, a unidade de sobreposição de envelope de frequência 1q adquire o fator de escalonamento sfdec(1,s), 0 < s < s da informação de envelope de frequência.
[217] Depois disso, a unidade de sobreposição de envelope de frequência 1q repete o processamento da etapa k a partir de k=2 para k=mH e calcula o fator de escalonamento descrito acima. Etapa K
[218] Quando o inteiro k não está incluído no conjunto Nc, uma diferença no fator de escalonamento dsfdec(k,s), 0<s<s é adquirido a partir da informação de envelope de frequência, o fator de escalonamento é calculado pela equação a seguir: Equação 52
Figure img0047
e 1 é adicionado ao inteiro k e então o processo prossegue para a próxima (etapa k). Por outro lado, quando o inteiro k é incluído no conjunto Nc, 1 é adicionado ao inteiro k como está e então o processo prossegue para a próxima (etapa k).
[219] Adicionalmente, no caso de recebimento de uma diferença no fato de escala sfdec(1,s), 0<S<SE da informação de envelope de frequência, o processamento na etapa k acima pode ser realizada pelo cálculo sfdec(0,s), 0<S<SE utilizando o componente de baixa frequência do sinal no domínio da frequência recebido a partir da unidade de banco de filtro de divisão de banda 1c. Por exemplo, nas equações 63, 64 e 65 descritas posteriormente, X(j,i) podem ser substituídas com Xdec(j,i) e sf(0,s) calculado utilizando um k1 e kh especificados satisfazendo 0<k1<kh<kx, onde k=0 pode ser configurado como sfdec(0,s).
[220] Nesse exemplo, diferentemente do exemplo descrito acima, a informação de envelope de frequência pode corresponder ao fator de escalonamento sfdec(k,s) propriamente dito. Adicionalmente, a informação de envelope de frequência pode ser uma diferença dtsf(s,k), 1<s<sE, 1<k<mH na direção de tempo quando do cálculo do fator de escalonamento sfdec(k,s), 1<k<mH no quadro s (s>1) pela equação a seguir utilizando o fator de escalonamento sfdec(k, s-1) no quadro s. Equação 53
Figure img0048
[221] Nesse caso, no entanto, sfdec(k,0), 1<k<mH correspondendo ao valor inicial é adquirido utilizando outra forma tal como o método descrito acima.
[222] Adicionalmente, o fator de escalonamento da sub-banda pode ser calculado utilizando-se interpolação ou extrapolação a partir de pelo menos um fator de escalonamento do componente de baixa frequência e o fato de escalonamento da sub-banda da banda de alta frequência. Nesse caso, a informação de envelope de frequência é o fator de escalonamento da sub-banda a ser utilizada para interpolação ou extrapolação e um parâmetro de interpolação ou extrapolação dentro da banda de alta frequência. Para o cálculo do fator de escalonamento do componente de baixa frequência, o componente de baixa frequência do sinal no domínio da frequência recebido a partir da unidade de banco de filtro de divisão de banda 1c é utilizado.
[223] O parâmetro de interpolação ou extrapolação pode ser um parâmetro especificado. Adicionalmente, a interpolação ou extrapolação do fator de escalonamento pode ser realizada pelo cálculo de um parâmetro a ser utilizado de fato para interpolação ou extrapolação a partir do parâmetro de interpolação ou extrapolação especificado e o parâmetro de interpolação ou extrapolação contido na informação de envelope de frequência. Adicionalmente, em pelo menos um dos casos nos quais a informação de envelope de frequência não é recebida e onde a informação de envelope de frequência não contém parâmetro de extrapolação ou interpolação, a interpolação ou extrapolação do fator de escalonamento pode ser realizada utilizando o parâmetro de interpolação ou extrapolação especificado apenas. Note que, nessa modalidade, um método de interpolação e extrapolação não é particularmente limitado.
[224] A forma de informação de envelope de frequência descrita acima é apenas um exemplo, e pode ser qualquer forma desde que seja um parâmetro representando variação da energia de sinal ou amplitude de sinal na direção de frequência para cada sub-banda da banda de alta frequência. Nessa modalidade, a forma da informação de envelope de frequência não é particularmente limitada.
[225] Então, a unidade de sobreposição de envelope de frequência 1q transforma EF(k,s) descrito acima utilizando a equação a seguir. Equação 54
Figure img0049
[226] Então, a unidade de sobreposição de envelope de frequência 1q calcula a quantidade E2(m,i) pela equação a seguir utilizando o envelope de tempo E0(m,i) e o envelope de frequência E1(m,i) transformado como acima. Equação 55
Figure img0050
[227] Adicionalmente, E2(m,i) descrito acima pode estar na forma determinada pela seguinte equação. Equação 56
Figure img0051
[228] Adicionalmente, pode estar na forma determinada pela equação a seguir. Equação 57
Figure img0052
onde Q(m), 0<m<kmax-kx é um inteiro satisfazendo a seguinte equação Equação 58
Figure img0053
[229] Adicionalmente, pode estar na forma determinada pela equação a seguir: Equação 59
Figure img0054
[230] Note que, no entanto, a forma E2(m,i) descrito acima não está limitado aos exemplos acima na presente invenção.
[231] Então, a unidade de sobreposição de envelope de frequência 1q calcula a quantidade E(m,i) pela equação a seguir utilizando E2(m,i) descrito acima. Equação 60
Figure img0055
[232] O coeficiente C(s) é fornecido pela equação a seguir. Equação 61
Figure img0056
[233] Adicionalmente, pode ser a equação a seguir. Equação 62
Figure img0057
[234] A unidade de ajuste de envelope de frequência e tempo 1p ajusta o envelope de frequência e tempo do sinal de alta frequência XH(JJ), kx<j<kmax suprido a partir da unidade de geração de alta frequência 1h pela utilização do envelope de frequência e tempo E1(m,i) suprido a partir da unidade de sobreposição de envelope de frequência 1q.
[235] Deve-se notar que os primeiro a sexto exemplos do decodificador de fala 1 de acordo com a primeira modalidade da invenção podem ser aplicados ao decodificador de fala 101 de acordo com a segunda modalidade da invenção.
[236] A Fig. 25 é um diagrama ilustrando uma configuração de um codificador de fala 102 de acordo com a segunda modalidade, e a Fig. 26 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 102 ilustrado na Fig. 25. O codificador de fala 102 da Fig. 25 é diferente do codificador de fala 2 de acordo com a primeira modalidade pelo fato de incluir uma unidade de cálculo de informação de envelope de frequência 2n.
[237] A unidade de cálculo de informação de envelope de frequência 2n recebe o sinal de alta frequência X(j,i), {0<j<N, 0<i<t(SE)} da unidade de banco de filtro de divisão de banda 2c e calcula a informação de envelope de frequência. Especificamente, o cálculo da informação de envelope de frequência é realizado como segue.
[238] Primeiro, a unidade de cálculo de informação de envelope de frequência 2n calcula o envelope de frequência da energia na sub-banda B(F)k (onde k = 1, 2, 3,...,mH) pela equação a seguir. Equação 63
Figure img0058
[239] A seguir, a unidade de cálculo de informação de envelope de frequência 2n calcula o fator de escalonamento sf(k,s), pela equação a seguir de acordo com o método descrito em "ISO/IEC 14496-3 4.B.18". Equação 65
Figure img0059
[240] Adicionalmente, pode ser configurado pela seguinte equação Equação 66
Figure img0060
de acordo com o decodificador de fala 101.
[241] Então, a unidade de cálculo de informação de envelope de frequência 2n pode configurar a informação de envelope de frequência como o fator de escalonamento descrito acima sf(k,s) (1<k<mH). Adicionalmente, a informação de envelope de frequência pode estar na forma da equação a seguir. Especificamente, uma diferença no fator de escalonamento descrito acima sf(k,s) é definida pela equação a seguir. Equação 67
Figure img0061
e dsf(k,s) e sf(1,s) (0<s<sE) podem ser utilizados como informação de envelope de frequência.
[242] Adicionalmente, como a unidade de sobreposição de envelope de frequência 1a do decodificador de fala 101 de acordo com a segunda modalidade, o fator de escalonamento descrito acima sf(0,s) pode ser calculado utilizando o sinal de frequência baixa X(j,i)(0<j<kx) no domínio da frequência, e dsf(1,s) calculado pelo fato de escalonamento sf(0,s) pode ser contido na informação de envelope de frequência.
[243] Adicionalmente, a informação de envelope de frequência pode ser um parâmetro de extrapolação a partir da banda de baixa frequência quando o fator de escalonamento da banda de alta frequência é aproximada pela extrapolação a partir do fator de escalonamento do componente de frequência baixa. Adicionalmente, a informação de envelope de frequência pode ser o fator de escalonamento da sub-banda e o parâmetro de interpolação ou extrapolação dentro da banda de alta frequência quando do cálculo de uma parte diferente das várias sub-bandas dos fatores de escalonamento dessas várias sub-bandas da banda de alta frequência pela utilização de interpolação ou extrapolação. Uma combinação das primeira e última formas pode ser informação de envelope de frequência.
[244] Note que, nessa invenção, a informação de envelope de frequência não está limitada aos exemplos descritos acima.
[245] Como um método de quantização e codificação da informação de envelope de frequência, a informação de envelope de frequência pode ser quantizada de forma escalar e então codificada por entropia tal como codificação Huffman e codificação Aritmética. Adicionalmente, a informação de envelope de frequência pode ser quantizada por vetor utilizando um livro código especificado e então seu índice pode ser configurado como um código.
[246] Especificamente, o fator de escalonamento descrito acima sf(k,s) pode ser quantizado de forma escalar e então codificado por entropia tal como codificação Huffman e codificação Aritmética. Adicionalmente, dsf(k,s) descrito acima pode ser quantizado de forma escalar e então codificado por entropia. Adicionalmente, o fator de escalonamento descrito acima sf(k,s) pode ser quantizado por vetor utilizando um livro código especificado e então seu índice pode ser configurado como um código. Adicionalmente, o dsf(k,s) descritos acima pode ser quantizado por vetor utilizando um livro código especificado e então seu índice pode ser configurado como um código. Adicionalmente, uma diferença no fator de escalonamento quantizado de forma escalar sf(k,s) pode ser codificada por entropia.
[247] Por exemplo, EDelta(k,s) pode ser calculado pela equação a seguir Equação 68
Figure img0062
utilizando sf(k,s) na equação descrita acima, de acordo com o método descrito em "ISO/IEC 14496-3 4.B.18" e EDelta(k,s) pode ser codificado com código Huffman.
[248] Note que quando um determinado inteiro 1 é incluído em um conjunto Nc, a quantização e codificação descritas acima de sf(l,s) (0<S<SE) e dsf(l,s) (0<S<SE) podem ser omitidas.
[249] Adicionalmente, na presente invenção, a quantização e codificação da informação de envelope de frequência não são limitadas aos exemplos descritos acima.
[250] Os primeiro a quarto exemplos alternativos do codificador de fala 2 de acordo com a primeira modalidade da invenção podem ser aplicados ao codificador de fala 102 de acordo com a segunda modalidade da invenção. Por exemplo, a Fig. 27 é um diagrama ilustrando uma configuração quando o primeiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade da invenção é aplicado ao codificador de fala 102 de acordo com a segunda modalidade da invenção, a Fig. 28 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 102 ilustrado na Fig. 72. Adicionalmente, a Fig. 29 é um diagrama ilustrando uma configuração quando o segundo exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade da invenção é aplicado ao codificador de fala 102 de acordo com a segunda modalidade da invenção, e a Fig. 30 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 102 ilustrado na Fig. 29.
Terceira Modalidade
[251] Uma terceira modalidade da presente invenção é descrita abaixo.
[252] A Fig. 31 é um diagrama ilustrando uma configuração de um decodificador de fala 201 de acordo com a terceira modalidade, e a Fig. 32 é um fluxograma ilustrando um procedimento de decodificação de fala pelo decodificador de fala 201 ilustrado na Fig. 31. O decodificador de fala 201 da Fig. 31 é diferente do decodificador de fala 1 de acordo com a primeira modalidade visto que inclui adicionalmente uma unidade de controle de cálculo de envelope de tempo 1s e incluir uma unidade de quantização inversa e decodificação de sequência codificada 1r e uma unidade de ajuste de envelope 1t no lugar da unidade de quantização inversa e decodificação de sequência codificada 1e e a unidade de ajuste de envelope de tempo 1i (1c a 1d, 1h, 1j e 1r a 1t são algumas vezes referidos também como uma unidade de extensão de banda (meios de extensão de banda)).
[253] A unidade de análise de sequência codificada 1d analisa a sequência codificada de alta frequência suprida a partir da unidade de demultiplexação 1a e, dessa forma, obtém informação suplementar codificada para geração de alta frequência e informação de controle de cálculo de envelope de tempo e obtém adicionalmente a informação de envelope de tempo codificada ou segunda informação de envelope de frequência codificada.
[254] A unidade de quantização inversa e decodificação de sequência codificada 1r decodifica a informação suplementar codificada para geração de alta frequência suprida a partir da unidade de análise de sequência codificada 1d e, dessa forma, obtém informação suplementar para geração de alta frequência.
[255] A unidade de geração de alta frequência 1h duplica o sinal de frequência baixa Xdec(j,i), 0<j<kx suprido a partir da unidade de banco de filtro de divisão de banda 1c na banda de alta frequência utilizando informação suplementar para geração de alta frequência suprida a partir da unidade de quantização inversa e decodificação de sequência codificada 1r e, dessa forma, gera um sinal de alta frequência Xdec(j,i), kx<j<kmax.
[256] A unidade de controle de cálculo de envelope de tempo 1s verifica se a unidade de ajuste de envelope 1t deve ajustar o envelope do sinal de alta frequência utilizando a segunda informação de envelope de frequência com base na informação de controle de cálculo de envelope de tempo suprida a partir da unidade de análise de sequência codificada 1d. Quando a unidade de ajuste de envelope 1t não ajusta o envelope do sinal de alta frequência utilizando a segunda informação de envelope de frequência, a unidade de quantização inversa e decodificação de sequência codificada 1r decodifica e quantiza de forma inversa a informação de envelope de tempo codificada suprida a partir da unidade de análise de sequência codificada 1d e obtém, dessa forma, a informação de envelope de tempo. Por outro lado, quando a unidade de ajuste de envelope 1t ajusta o envelope do sinal de alta frequência utilizando a segunda informação de envelope de frequência, a unidade de controle de cálculo de envelope de tempo 1s envia um sinal de controle de cálculo de envelope de tempo de baixa frequência para as unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e envia um sinal de controle de cálculo de envelope de tempo para a unidade de cálculo de envelope de tempo 1g de modo que o cálculo de envelope não seja realizado nas unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn e a unidade de cálculo de envelope de tempo 1g.
[257] Adicionalmente, a unidade de quantização inversa e decodificação de sequência codificada 1r decodifica e quantiza de forma inversa a segunda informação de envelope de frequência suprida a partir da unidade de análise de sequência codificada 1d e, dessa forma, obtém a segunda informação de envelope de frequência. Adicionalmente, nesse caso, a unidade de ajuste de envelope 1t ajusta o envelope de frequência do sinal de alta frequência XH(j,i) (kx<j<kmax) suprido a partir da unidade de geração de alta frequência 1h utilizando a segunda informação de envelope de frequência suprida a partir da unidade de quantização inversa e decodificação de sequência codificada 1r.
[258] Especificamente, a quantidade E3(k,s), 1<k<mH, 0<S<sE correspondendo a EF,dec(k,s) é calculado utilizando uma segunda informação de envelope de frequência quantizada de forma inversa e decodificada de acordo com o método de cálculo de EF,dec(k,s) na unidade de sobreposição de envelope de frequência 1q do decodificador de fala 101, e adicionalmente E3(k,s) descrito acima é transformado pela equação a seguir. Equação 69
Figure img0063
[259] Depois disso, o sinal de frequência alta Y(i,j) {kx<k<kmax, t(s)<i<t(s+1), 0<S<SE} cujo envelope é ajustado de acordo com o procedimento na unidade de ajuste de envelope de frequência e tempo 1p do decodificador de fala 101 é adquirido.
[260] Note que os primeiro a sétimo exemplos alternativos do decodificador de fala 1 de acordo com a primeira modalidade da invenção podem ser aplicados ao decodificador de fala 201 de acordo com a terceira modalidade da invenção.
[261] A Fig. 35 é um diagrama ilustrando uma configuração de um codificador de fala 202 de acordo com a terceira modalidade, e a Fig. 36 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 202 ilustrado na Fig. 35. O codificador de fala 202 da Fig. 35 é diferente do codificador de fala 2 de acordo com a primeira modalidade visto que inclui adicionalmente uma unidade de geração de informação de controle de cálculo de envelope de tempo 2j e uma segunda unidade de cálculo de informação de envelope de tempo 2o.
[262] A segunda unidade de cálculo de informação de envelope de frequência 2o recebe o sinal de alta frequência X(j,i) {kx<j<N, t(s)<i<t(s+1), 0<s<sE} da unidade de banco de filtro de divisão de banda 2c e calcula a segunda informação de envelope de frequência (processamento na etapa S207).
[263] A segunda informação de envelope de frequência pode ser calculada da mesma forma que o método de cálculo da informação de envelope de frequência no codificador de fala 102 de acordo com a segunda modalidade. Nessa modalidade, no entanto, o método de cálculo da segunda informação e envelope de frequência não é particularmente limitado.
[264] A unidade de codificação e quantização 2g quantiza e codifica a informação de envelope de tempo e a segunda informação de envelope de frequência. A quantização e codificação da informação de envelope de tempo podem ser realizadas da mesma forma que a quantização e codificação na unidade de quantização e codificação 2g do codificador de fala de acordo com as primeira e segunda modalidades. A quantização e codificação da segunda informação de envelope de frequência pode ser realizada da mesma forma que a quantização e codificação da informação de envelope de frequência na unidade de quantização e codificação 2g do codificador de fala de acordo com a segunda modalidade. Nessa modalidade, no entanto, o método de quantização e codificação da informação de envelope de tempo e a segunda informação de envelope de frequência não é particularmente limitado.
[265] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j gera informação de controle de cálculo de envelope de tempo utilizando pelo menos um dentre um sinal X(j,i) no domínio da frequência recebido a partir da unidade de banco de filtro de divisão de banda 2c, a informação de envelope de tempo recebida da unidade de cálculo de informação de envelope de tempo 2f, e a segunda informação de envelope de frequência recebida a partir da segunda unidade de cálculo de informação de envelope de frequência 2o (processando na etapa S209). A informação de controle de cálculo de envelope de tempo gerado pode ser a informação de controle de cálculo de envelope de tempo no decodificador de fala 201 de acordo com a terceira modalidade descrita acima.
[266] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode ser igual à do primeiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade, por exemplo.
[267] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j gera pseudo sinais de frequência alta localmente decodificados utilizando a informação de envelope de tempo e a segunda informação de envelope de frequência, respectivamente, e compara as mesmas com os Inal original da mesma forma que no primeiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade, por exemplo. Quando o pseudo sinal de alta frequência codificado localmente gerado utilizando a segunda informação de envelope de frequência está mais perto do sinal original, a informação indicando o ajuste do sinal de alta frequência utilizando a segunda informação de envelope de frequência no decodificador é gerada como a informação de controle de cálculo de envelope de tempo. A comparação entre cada um dos sinais de alta frequência decodificados localmente com o sinal original pode ser feita pelo cálculo de um sinal diferencial e determinação de se o sinal diferencial é pequeno ou não, por exemplo. Adicionalmente, a comparação pode ser feita pelo cálculo dos envelopes de tempo de cada um dos pseudo sinais de frequência alta decodificados localmente e o sinal original, calculando uma diferença dos envelopes de tempo de cada um dos pseudo sinais de alta frequência decodificados localmente e o sinal original, e determinando se a diferença é pequena ou não. Adicionalmente, a comparação pode ser feita pela determinação de se o valor máximo do sinal diferencial a partir do sinal original e/ou a diferença no envelope é pequena ou não. Nessa modalidade, o método de comparação não está limitados aos exemplos acima.
[268] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode adicionalmente utilizar pelo menos uma informação de envelope de tempo quantizada e a segunda informação de envelope de frequência quando da geração da informação de controle de cálculo de envelope de tempo.
[269] A unidade de construção de sequência codificada 2h constrói a sequência codificada de alta frequência utilizando a informação suplementar codificada para geração de alta frequência recebida a partir da unidade de quantização e codificação 2g, e a segunda informação de envelope de frequência quando a informação de controle de cálculo de envelope de tempo é informação indicando o ajuste do sinal de alta frequência utilizando a segunda informação de envelope de frequência no decodificador, ou a informação de envelope de tempo codificada de outra forma (processando na etapa S211).
[270] Note que os primeiro a quarto exemplos alternativos do codificador de fala 2 de acordo com a primeira modalidade da invenção podem ser aplicados ao codificador de fala 202 de acordo com a terceira modalidade da invenção.
Quarta Modalidade
[271] Uma quarta modalidade da presente invenção é descrita abaixo.
[272] A Fig. 33 é um diagrama ilustrando uma configuração de um decodificador de fala 301 de acordo com a quarta modalidade, e a Fig. 34 é um fluxograma ilustrando um procedimento de decodificação de fala pelo decodificador de fala 301 ilustrado na Fig. 33. O decodificador de fala 201 da Fig. 33 é diferente do decodificador de fala 1 de acordo com a primeira modalidade visto que inclui adicionalmente uma unidade de controle de cálculo de envelope de tempo 1s e uma unidade de sobreposição de envelope de frequência 1u e incluir uma unidade de quantização inversa e decodificação de sequência codificada 1r e uma unidade de ajuste de envelope de frequência e tempo 1v no lugar da unidade de quantização inversa e decodificação de sequência codificada 1e e a unidade de ajuste de envelope de tempo 1i, respectivamente (1c a 1d, 1h, 1j, 1r a 1s e 1u a 1v são algumas vezes referidos também como uma unidade de extensão de banda (meios de extensão de banda).
[273] A unidade de análise de sequência codificada 1d analisa a sequência codificada de frequência alta suprida a partir da unidade de demultiplexação 1a e, dessa forma, obtém a informação suplementar codificada para geração de alta frequência e informação de controle de cálculo de envelope de tempo e obtém, adicionalmente, informação de envelope de tempo codificada e informação de envelope de frequência codificada ou segunda informação de envelope de frequência codificada.
[274] A unidade de controle de cálculo de envelope de tempo 1s verifica se a unidade de ajuste de envelopa 1v deve ajustar o envelope do sinal de frequência alta utilizando a segunda informação de envelope de frequência com base na informação de controle de cálculo de envelope de tempo suprida a partir da unidade de análise de sequência codificada 1d e, quando a unidade de ajuste de envelope 1v não ajusta o envelope do sinal de alta frequência utilizando a segunda informação de envelope de frequência, a unidade de quantização inversa e decodificação de sequência codificada 1r decodifica e quantifica de forma inversa a informação de envelope de tempo codificada suprida a partir da unidade de análise de sequência codificada 1d e, dessa forma, obtém a informação de envelope de tempo.
[275] Por outro lado, quando a unidade de ajuste de envelope 1v ajusta o envelope do sinal de alta frequência utilizando a segunda informação de envelope de frequência, o mesmo processamento como na etapa S190 da terceira modalidade é realizado. Adicionalmente, o processamento da unidade de ajuste de envelope de frequência e tempo 1v também é igual ao da etapa S191 da terceira modalidade.
[276] Deve-se notar que os primeiro a sétimo exemplos alternativos do decodificador de fala 1 de acordo com a primeira modalidade da invenção podem ser aplicados ao decodificador de fala 301 de acordo com a quarta modalidade da invenção.
[277] A Fig. 37 é um diagrama ilustrando uma configuração de um codificador de fala 302 de acordo com a quarta modalidade, e a Fig. 38 é um fluxograma ilustrando um procedimento de codificação de fala pelo codificador de fala 302 ilustrado na Fig. 37. O codificador de fala 302 da Fig. 37 é diferente do codificador de fala 2 de acordo com a primeira modalidade visto que inclui adicionalmente uma unidade de geração de informação de controle de cálculo de envelope de tempo 2j, uma unidade de cálculo de informação de envelope de frequência 2p, e uma segunda unidade de cálculo de informação de envelope de frequência 2o.
[278] A unidade de codificação e quantização 2g quantiza e codifica a informação de envelope de tempo, a informação de envelope de frequência e a segunda informação de envelope de frequência. A quantização e a codificação da informação de envelope de tempo podem ser realizadas da mesma forma que a quantização e codificação na unidade de quantização e codificação 2g do codificador de fala de acordo com as primeira e segunda modalidades. A quantização e codificação da informação de envelope de frequência e a segunda informação de envelope de frequência podem ser realizadas da mesma forma que a quantização e codificação da informação de envelope de frequência na unidade de quantização e codificação 2g do codificador de fala de acordo com a segunda modalidade. Nessa modalidade, no entanto, o método de quantização e codificação da informação de envelope de tempo e a segunda informação de envelope de frequência não é particularmente limitado.
[279] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j gera informação de controle de cálculo de envelope de tempo utilizando pelo menos um dentre o sinal X(j,i) no domínio da frequência recebido da unidade de banco de filtro de divisão de banda 2c, a informação de envelope de tempo recebida a partir da unidade de cálculo de informação de envelope de tempo 2f, a informação de envelope de frequência recebida da unidade de cálculo de informação de envelope de frequência 2p, e a segunda informação de envelope de frequência recebida da segunda unidade de cálculo de informação de envelope de frequência 2o (processando na etapa S250). A informação de controle de cálculo de envelope de tempo gerada pode ser a informação de controle de cálculo de envelope de tempo no decodificador de fala 301 de acordo com a quarta modalidade.
[280] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode ser igual à do primeiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade, por exemplo. Adicionalmente, a unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode ser igual à do codificador de fala 202 de acordo com a terceira modalidade, por exemplo.
[281] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j gera pseudo sinais de alta frequência decodificados localmente utilizando a informação de envelope de tempo, a informação de envelope de frequência e a segunda informação de envelope de frequência, respectivamente, e compara os mesmos com o sinal original da mesma forma que no primeiro exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade, por exemplo. Quando o pseudo sinal de alta frequência decodificado localmente gerado utilizando a segunda informação de envelope de frequência está mais perto do sinal original, a informação indicando o ajuste do sinal de alta frequência utilizando a segunda informação de envelope de frequência no decodificador é gerada como informação de controle de cálculo de envelope de tempo.
[282] A comparação entre cada um dos pseudo sinais de alta frequência decodificados localmente com o sinal original pode ser igual à unidade de geração de informação de controle de cálculo de envelope de temo 2j do codificador de fala 202 de acordo com a terceira modalidade, e o método de comparação não é particularmente limitado nessa modalidade.
[283] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j pode utilizar adicionalmente pelo menos uma informação de envelope de tempo quantizada, a informação de envelope de frequência quantizada e a segunda informação de envelope de frequência quando da geração da informação de controle de cálculo de envelope de tempo.
[284] A unidade de construção da sequência codificada 2h constrói a sequência codificada de alta frequência utilizando a informação suplementar codificada para geração de alta frequência recebida a partir da unidade de quantização e codificação 1g, e a segunda informação de envelope de frequência codificada quando a informação de controle de cálculo de envelope de temo é informação indicando o ajuste do sinal de alta frequência utilizando a segunda informação de envelope de frequência no decodificador, ou a informação de envelope de tempo codificada e a informação de envelope de frequência codificada do contrário (processando na etapa S252).
[285] Note que os primeiro a quarto exemplos alternativos do codificador de fala 2 de acordo com a primeira modalidade da invenção podem ser aplicados ao codificador de fala 302 de acordo com a quarta modalidade da invenção. Oitavo Exemplo Alternativo de Decodificador de Fala de Acordo com a Primeira Modalidade
[286] Nesse exemplo alternativo, na unidade de cálculo de envelope de tempo 1g do decodificador de fala 1 de acordo com a primeira modalidade, o processamento com base em uma função especificada é realizado no envelope de tempo calculado. Por exemplo, a unidade de cálculo de envelope de tempo 1g normaliza o envelope de tempo com relação ao tempo e calcula o envelope de tempo ET'(l,i) pela seguinte equação: Equação 70
Figure img0064
[287] Nesse exemplo alternativo, depois de o envelope de tempo ET'(l,i) ser calculado, o processamento da substituição do valor ET(l,i) com o valor ET'(l,i) pode ser feito desde então.
[288] De acordo com esse exemplo alternativo, apenas o formato temporal do sinal de alta frequência XH(JJ) (FH(I)^|<FH(I+1)) dentro da banda de frequência FH(I)^|<FH(1+1) do quadro s pode ser ajustado sem alterar a quantidade total de energia da banda de frequência FH(I)^|<FH(1+1) no quadro s do sinal de alta frequência XH(j,i) gerado pela unidade de geração de alta frequência 1h.
[289] Note que o oitavo exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade pode ser aplicado também aos primeiro a sétimo exemplos alternativos do decodificador de fala 1 de acordo com a primeira modalidade e os decodificadores de fala de acordo com as segunda a quarta modalidades, e, nesse caso, ET(l,i) pode ser substituído por ET'(l,i). Nono Exemplo Alternativo do Decodificador de Fala de Acordo com a Primeira Modalidade
[290] Nesse exemplo alternativo, quando as primeira a n-ésima unidades de cálculo de envelope de tempo de baixa frequência 1f1 a 1fn do decodificador de fala 1 de acordo com a primeira modalidade adquire o envelope de tempo Li(k,i) pela suavização da quantidade L0(k,i) na direção de tempo, Lo(k,i) (t(s)- d<i<t(s)) é armazenado mediante a transição do quadro s-1 para o quadro s. Esse exemplo alternativo permite a suavização da quantidade L0(k,i) (para ser específico, L0(k,i) (t(s)<i<t(s)+d)) do quadro s que está perto do limite com o quadro s-1.
[291] O nono exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade também é aplicável aos primeiro a oitavo exemplos alternativos do decodificador de fala 1 de acordo com a primeira modalidade e os decodificadores de fala de acordo com as segunda a quarta modalidades. Quinto Exemplo Alternativo de Codificador de Fala de Acordo com a Primeira Modalidade
[292] Nesse exemplo alternativo, o cálculo da informação de envelope de tempo na unidade de cálculo de informação de envelope de tempo 2f do codificador de fala 2 de acordo com a primeira modalidade é realizado com base na correlação entre um envelope de tempo de referência H(l,i) e g(l,i) descrito acima. Por exemplo, a unidade de cálculo de informação de envelope de tempo 2f calcula a informação de envelope de tempo como segue.
[293] Especificamente, um coeficiente de correlação corr(1) ente H(l,i) e g(l,i) é calculado pela seguinte equação: Equação 71
Figure img0065
[294] O coeficiente de correlação corr(l) é comparado com um limite especificado, e a informação de envelope de tempo é calculada com base no resultado da comparação. Alternativamente, um valor correspondendo a corr2(l) pode ser calculado e comparado com um limite especificado, e a informação de envelope de tempo pode ser calculada com base no resultado da comparação.
[295] Por exemplo, a informação de envelope de tempo é calculada como segue. Assumindo-se que o limite especificado a ser comparado com o coeficiente de correlação seja corrth(l) e gdec(l,i) fornecidos pela equação 21, a informação de envelope de tempo é calculada pela seguinte equação. Equação 72
Figure img0066
[296] Quando a informação de envelope de tempo calculada no exemplo acima é registrada no segundo exemplo alternativo do decodificador 1 de acordo com a primeira modalidade, no caso de Al,k(s)=0, A1,0(s)=const(0) (isso é, no caso onde o coeficiente de correlação é menor do que um limite especificado no codificador) na sub-banda B(T)l, a unidade de controle de cálculo de envelope de tempo 1m envia o sinal de controle de cálculo de envelope de tempo de baixa frequência para as unidades de cálculo de envelope de tempo de baixa frequência k (K>0) 1fk de modo que o cálculo de envelope de tempo de baixa frequência nas unidades de cálculo de envelope de tempo de baixa frequência 1fk não seja realizado. Por outro lado, no caso de Al,k(s)=const(k), A1,0(s)=0 (isso é, no caso onde o coeficiente de correlação é maior do que um limite especificado no codificador), a unidade de controle de cálculo de envelope de tempo 1m envia o sinal de controle de cálculo de envelope de tempo e baixa frequência para as unidades de cálculo de envelope de tempo de baixa frequência k (k>0) 1fk de modo que o cálculo de envelope de tempo de baixa frequência nas unidades de cálculo de envelope de tempo de baixa frequência 1fk seja realizado.
[297] Note que, nesse exemplo alternativo, o método de cálculo não está limitado ao exemplo acima desde que a informação de envelope de tempo seja calculada com base na correlação entre o envelope de tempo de referência H(l,i) e g(l,i) descrito acima.
[298] No caso de cálculo de informação de envelope de tempo com base em um erro (ou um erro ponderado) entre o envelope de tempo de referência H(l,i) e g(l,i) como descrito no codificador de fala 2 de acordo com a primeira modalidade, a informação de envelope de tempo é calculada com base no grau de combinação entre o envelope de tempo de referência H(l,i) e g(l,i). Por outro lado, nesse exemplo alternativo, a informação de envelope de tempo é calculada com base no grau de similaridade entre os formatos do envelope de tempo de referência H(l,i) e g(l,i).
[299] O quinto exemplo alternativo do codificador de fala 2 de acordo com a primeira modalidade também é aplicável aos primeiro a quinto exemplos alternativos do codificador de fala 2 de acordo com a primeira modalidade e os codificadores de fala de acordo com as segunda a quarta modalidades. Primeiro Exemplo Alternativo do Decodificador de Fala de Acordo com a Segunda Modalidade
[300] Nesse exemplo alternativo, na unidade de sobreposição de envelope de frequência 1q do decodificador de fala 101 de acordo com a segunda modalidade, o processamento com base em uma função especificada é realizado no envelope de frequência EF,dec(k,s). Por exemplo, a unidade de sobreposição de envelope de frequência 1q realiza o processamento com base em uma função de suavização do envelope de frequência EF,dec(k,s) fornecido pela equação a seguir. Equação 73
Figure img0067
onde Equação 74
Figure img0068
e sch(j) e dh são um coeficiente especificado de suavização e uma ordem especificada de suavização, respectivamente. Nesse caso, EF,dec,Filt(k,i) é substituído por EF,dec(k,s) no processamento subsequente.
[301] Adicionalmente, uma função de determinação de se ou não suavizar o envelope de frequência EF,dec(k,s) com base nas características de sinal do quadro correspondendo ao envelope de frequência EF,dec(k,s) pode ser incluída na equação 73 acima. Adicionalmente, a informação indicando se ou não realiza a suavização pode ser incluída na sequência codificada, e uma função de determinação de se ou não se suaviza o envelope de frequência EF,dec(k,s) com base na informação pode ser incluída.
[302] Note que o primeiro exemplo alternativo do decodificador de fala 101 de acordo com a segunda modalidade também é aplicável ao decodificador de fala de acordo com a quarta modalidade. Segundo Exemplo Alternativo do Decodificador de Fala de Acordo com a Segunda Modalidade
[303] Na unidade de sobreposição de envelope de frequência 1q do decodificador de fala 101 de acordo com a segunda modalidade, a quantidade E(m,i) é o valor obtido pela correção E2(m,i) com C(s) (Equação 60). Adicionalmente, de acordo com a equação 61, a energia do sinal de alta frequência após o ajuste do envelope de frequência e tempo na banda kx<m<kmax do quadro s é corrigido para ser o total do envelope de tempo E0(m,i) na banda kx<m<kmax do quadro s. Nesse exemplo alternativo, C(s) é fornecido pela seguinte equação de modo que a energia do sinal de frequência alta depois do ajuste do envelope de frequência e tempo na banda kx<m<kmax do quadro s seja mantida depois do ajuste do envelope de frequência e tempo Equação 75
Figure img0069
[304] Adicionalmente, C(s) pode ser fornecido pela equação a seguir de modo que a energia do sinal de frequência alta depois do ajuste do envelope de frequência e tempo na banda kx<m<kmax do quadro s seja o total do envelope de tempo E2(m,i) na banda kx<m<kmax do quadro s. Equação 76 C(s) = 1
[305] Note que o segundo exemplo alternativo do decodificador de fala 101 de acordo com a segunda modalidade também é aplicável ao primeiro exemplo alternativo do decodificador de fala 101 de acordo com a segunda modalidade e o decodificador de fala de acordo com a quarta modalidade. Terceiro Exemplo Alternativo do Decodificador de Fala de Acordo com a Segunda Modalidade
[306] A Fig. 39 é um diagrama ilustrando uma configuração de um terceiro exemplo alternativo do decodificador de fala 101 de acordo com a segunda modalidade, e a Fig. 40 é um fluxograma lustrando um procedimento de decodificação de fala pelo decodificador de fala 101 ilustrado na Fig. 39. Esse exemplo alternativo é diferente do decodificador de fala 101 de acordo com a segunda modalidade visto que inclui uma unidade de cálculo de envelope de frequência 1w no lugar da unidade de sobreposição de envelope de frequência 1q.
[307] A unidade de cálculo de envelope de frequência 1w nesse exemplo alternativo calcula o envelope de frequência E1(m,s) da mesma forma que a unidade de sobreposição de envelope de frequência 1q de acordo com a segunda modalidade (etapa S119a).
[308] Então, a unidade de ajuste de envelope de frequência e tempo 1p ajusta o envelope de frequência e tempo como segue, por exemplo, utilizando o envelope de tempo ET(l,i) e o envelope de frequência E1(m,s) (Etapa S120).
[309] Especificamente, a unidade de ajuste de envelope de frequência e tempo 1p transforma o envelope de tempo ET(l,i) em E0 (m,i) da mesma forma que a unidade de sobreposição de envelope de frequência 1q.
[310] Adicionalmente, da mesma forma que o ajuste HF em SBR de "MPEG4 AAC", o piso de ruído e o fator de escalonamento Q(m,s) no quadro s suprido a partir da unidade de quantização inversa e decodificação de sequência codificada 1e é transformado pela equação a seguir. Equação 77
Figure img0070
[311] Adicionalmente, o nível sinusoidal no quadro s é fornecido pela equação a seguir utilizando a quantidade S(m,s) calculada por um parâmetro que determina se ou não adiciona uma senoide que é suprida a partir da unidade de quantização inversa e decodificação de sequência codificada 1e. Equação 78
Figure img0071
[312] Adicionalmente, o ganho é fornecido pela equação a seguir utilizando o envelope de frequência E1(m,s), o piso de ruído e o fator de escalonamento Q(m,s) no quadro s suprido a partir da unidade de quantização inversa e decodificação de sequência codificada 1e, e a função δ(s) que depende do parâmetro do quadro s suprido a partir da unidade de quantização inversa e decodificação de sequência codificada 1e. Equação 79
Figure img0072
[313] A quantidade Ecurr(m,s) é definida pela equação a seguir. Equação 80
Figure img0073
[314] Pode ser definida também pela equação a seguir: Equação 81
Figure img0074
[315] Adicionalmente, S'(m,s) é a função que representa se existe uma senoide a ser adicionada na sub-banda B(F)k (GH(k)<m<GH(k+1)) incluindo a frequência representada pelo índice m no quadro s, e é "1" quando existe uma senoide a ser adicionada e "0" do contrário.
[316] Adicionalmente, a quantidade a seguir X'H(m+kx,i) pode ser calculada utilizando-se a quantidade descrita acima Ecurr(m,s). Equação 82
Figure img0075
[317] Alternativamente, a quantidade X'H(m+kx,i) pode ser calculada também pela seguinte equação. Equação 83
Figure img0076
[318] A quantidade X'H(m+kx,i) pode ser calculada também a partir da equação a seguir. Equação 84
Figure img0077
[319] Nesse processamento, o sinal de alta frequência XH(m+kx,i) pode ser suavizado na direção de tempo no índice de frequência m ou a sub-banda B(F)k. Dessa forma, pela realização do processamento subsequente, o sinal de alta frequência com base no envelope de tempo calculado na unidade de cálculo de envelope de tempo 1g pode ser enviado sem depender do envelope de tempo do sinal de alta frequência XH(m+kx,i).
[320] Note que o ganho G2(m,s), o piso de ruído e o fator de escalonamento Q3(m,s) e o nível de senoide S3(m,s) podem ser calculados pela realização do processamento com base em uma função específica no ganho descrito acima, o piso de ruído e o fator de escalonamento e o nível de senoide. Por exemplo, da mesma forma que o ajuste HF em SBR de "MPEG4 AAC", o processamento com base na função delimitação de ganho para evitar adição desnecessária de ruído (limitador de ganho) e a compensação para perda de energia pela limitação de ganho (amplificador de ganho) são realizadas no ganho descrito acima, o piso de ruído e o fator de escalonamento e nível de senoide para, dessa forma, calcular o ganho G2(m,s), o piso de ruído e o fator de escalonamento Q3(m,s) e o nível de senoide S3(m,s) (ver ISO/IEC 1449-3 4.6.18.7.5 para um exemplo específico). No caso de realização do processamento especificado acima, G2(m,s), Q3(m,s) e S3(m,s) são utilizados ao invés de G(m,s), Q2(m,s) e S2(m,s) no processamento subsequente.
[321] As quantidades G3(m,i) e Q4(m,i) fornecidas pela equação a seguir são calculadas utilizando-se o ganho G(m,s), o piso de ruído e o fator de escalonamento Q2(m,s), e o envelope de tempo E0(m,i) obtido como acima. Na equação a seguir, o ganho e o piso de ruído e o fator de escalonamento são calculados com base no envelope de tempo, e, depois do processamento subsequente, o sinal com o envelope de frequência de tempo ajustado pela unidade de ajuste de envelope de frequência e tempo 1p pode ser finalmente enviado. Equação 85
Figure img0078
[322] Note que apesar de o ganho e o piso de ruído e o fator de escalonamento serem calculados com base no envelope de tempo na equação acima, o nível de senoide pode ser calculado também com base no envelope de tempo da mesma forma que o ganho e o piso de ruído e o fator de escalonamento.
[323] Adicionalmente, o processamento com base em uma função especificada pode ser realizado em G3(m,i) e Q4(m,i) descritos acima. Por exemplo, o processamento com base em uma função de suavização pode ser realizado. GFilt(m,i) e QFilt(m,i) fornecidos pelas equações acima são calculados Equação 87
Figure img0079
Equação 88
Figure img0080
onde sch(j) e dh são um coeficiente especificado de suavização e uma ordem especificada de suavização, respectivamente. Adicionalmente GTemp(m,i) e QTemp(m,i) são fornecidos pelas seguintes equações. Equação 89
Figure img0081
Equação 90
Figure img0082
[324] Adicionalmente, o efeito de suavização pode ser igualmente obtido pelo processamento com base nas funções a seguir. Equação 91
Figure img0083
Equação 92
Figure img0084
onde Wold(m,i) e wcurr(m,i) são fatores de ponderação especificados.
[325] Adicionalmente, GTemp(m,i) e QTemp(m,i) são fornecidos pelas equações a seguir. Equação 93
Figure img0085
Equação 94
Figure img0086
[326] Adicionalmente, Gold(m) é o ganho de um índice de tempo (especificamente, t(s)-1) no quadro anterior (especificamente, o quadro s-1) no limite com o quadro s e fornecido por qualquer uma das equações abaixo. Equação 95
Figure img0087
Equação 96
Figure img0088
[327] No caso no qual o processamento descrito acima com base em uma função especificada é realizado, GFilt(m,s) e QFilt(m,s) são utilizados ao invés de G3(m,s) e Q4(m,s) no processamento subsequente.
[328] A função descrita acima de suavização pode incluir uma função de determinação de se ou não se realiza a suavização com base no parâmetro do quadro s suprido a partir da unidade de quantização inversa e decodificação de sequência codificada 1e. Adicionalmente, a informação indicando se ou não se realiza a suavização pode ser incluída na sequência codificada, e a função descrita acima da suavização pode incluir uma função de determinação de se ou não se realiza a suavização com base na informação. Adicionalmente, pode incluir uma função de determinação de se ou não se realiza a suavização com base em pelo menos um dos acima.
[329] Finalmente, a unidade de ajuste de envelope de frequência e tempo 1p obtém o sinal com o envelope de frequência e tempo ajustado pelas equações a seguir.
[330] Equação 97
Figure img0089
Equação 98
Figure img0090
onde V0 e V1 são conjuntos que especificam um componente de ruído, f é uma função que mapeia o índice i no índice dos conjuntos, ΦRθ,sin e Φim,sin são conjuntos que especificam a fase de um componente sinusoidal, e fsin é uma função que mapeia o índice i no índice nos conjuntos (vide "ISO/IEC 14496-3 4.6.18" para um exemplo específico).
[331] Alternativamente, na equação 97 descrita acima, X'H(m+kx,i) pode ser utilizado no lugar de XH(m+kx,i).
[332] Note que, quando um amplificador de ganho do ajuste HF em SBR de "MPEG4 AAC" descrito acima é aplicado à unidade de sobreposição de envelope de frequência 1q do decodificador de fala 101 de acordo com a segunda modalidade, a perda de energia devido à limitação de ganho é compensada em unidades do quadro s para cada sub-banda B(F)k (GH(k)<j<Gi-i(k+1)). Por outro lado, de acordo com a equação a seguir, a perda de energia decorrente da limitação de ganho é compensada em unidades de índice de tempo i para o sinal de frequência alta X-(j,i) para cada sub-banda B(F)k (G-(k)<j<G-(k+1)). Equação 99
Figure img0091
[333] Na equação descrita acima, o limitador de ganho de ajuste -F em SBR de "MPEG4 AAC" descrito acima pode ser aplicado ao ganho G(m,s) e ao fator de escalonamento de ruído Q2(m,s).
[334] Utilizando-se o ganho G2(m,i) e o fator de escalonamento de ruído Q3(m,i), GTemp(m,i) e QTemp(m,i) são fornecidos pela equação a seguir ao invés de pelas equações 89 e 90 descritas acima. Equação 100
Figure img0092
Equação 101
Figure img0093
[335] Adicionalmente, quando a equação 99 é substituída pela seguinte equação, a perda de energia devido à limitação de ganho é compensada em unidades de índice de tempo i para o sinal de alta frequência X-(j,i) para cada sub-banda B(F)k (FH(k)<j<FH(k+1)). Equação 102
Figure img0094
[336] Adicionalmente, quando a equação 99 é substituída pela equação a seguir, a perda de energia devido à limitação de ganho é compensada em unidades de índice de tempo i para o sinal de alta frequência XH(j,i) para cada índice de frequência m. Equação 103
Figure img0095
[337] Alternativamente, quando do cálculo da quantidade acima GBoostTemp(m,i), X'H(m+k,i) pode ser utilizado ao invés de XH(m+kx,i).
[338] Na unidade de ajuste de envelope de frequência e tempo 1p do decodificador de fala 101 de acordo com a segunda modalidade, o ajuste do envelope de frequência e tempo é realizado de forma similar ao ajuste FH em SBR de "MPEG4 AAC" utilizando a quantidade E(m,i) recebida da unidade de sobreposição de envelope de frequência 1q, da mesma forma que a unidade de ajuste de envelope de tempo 1i do decodificador de fala 1 de acordo com a primeira modalidade. Portanto, da mesma forma que o ajuste HF em SBR de "MPEG4 AAC", quando da realização do processamento com base na função de limitação do ganho para evitar adição desnecessária de ruído (limitador de ganho) e compensação da perda de energia pela limitação de ganho (amplificador de ganho) no ganho, o piso de ruído e o fator de escalonamento e o nível sinusoidal, esse processamento é realizado no índice de tempo i(t(s)<i<t(s+1)). Por outro lado, de acordo com esse exemplo alternativo, quando da realização do processamento com base na função da limitação do ganho para evitar a adição desnecessária de ruído (limitador de ganho) e compensação por perda de energia pela limitação de ganho (amplificador de ganho) no ganho, o piso de ruído e o fator de escalonamento e o nível sinusoidal, pelo menos um dos processamentos acima pode ser realizado no quadro s. Dessa forma, esse exemplo alternativo permite a redução da quantidade de operação para o processamento acima em comparação com o decodificador de fala 101 de acordo com a segunda modalidade.
[339] Note que o terceiro exemplo alternativo do decodificador de fala 101 de acordo com a segunda modalidade é aplicável também aos primeiro e segundo exemplos alternativos do decodificador de fala 101 de acordo com a segunda modalidade e o decodificador de fala de acordo com a quarta modalidade. Outra Modalidade do Terceiro Exemplo Alternativo do Decodificador de Fala 101 de Acordo com a Segunda Modalidade
[340] No caso onde os primeiro, segundo e terceiro exemplos alternativos do decodificador de fala 1 de acordo com a primeira modalidade e o quinto exemplo alternativo do decodificador de fala 1 de acordo com a primeira modalidade que executa pelo menos um dentre o processamento desses exemplos alternativos são aplicados ao exemplo alternativo descrito acima, existe um caso no qual a unidade de cálculo de envelope de tempo 1g não calcula o envelope de tempo ET(l,i). Nesse caso, a operação de processamento que exige E0(m,i) é realizada pela substituição E0(m,i) com 1. Dessa forma, o processamento de multiplicação E0(m,i), a energia de E0(m,i) e a raiz quadrada de E0(m,i) pode ser omitida, reduzindo, assim, a quantidade de computação. Note que, no processamento utilizando o método acima, a unidade de ajuste de envelope de frequência e tempo 1p não precisa calcular E0(m,i). Sexto Exemplo Alternativo do Codificador de Fala 1 de Acordo com a Primeira Modalidade
[341] A unidade de cálculo de informação de envelope de tempo 2f calcula a informação de envelope de tempo com base nas características de pelo menos um sinal do sinal X(j,i) no domínio da frequência obtido a partir da unidade de banco de filtro de divisão de banda 2c, um sinal de entrada externo recebido através do dispositivo de comunicação do codificador de fala 2, e o sinal de frequência baixa subamostrada no domínio do tempo obtido como uma saída da unidade de subamostragem 2a. As características d sinal podem ser características transientes, tonalidade, características de ruído e similares do sinal, por exemplo, apesar de as características de sinal não serem limitadas aos exemplos específicos nesse exemplo alternativo.
[342] Note que esse exemplo alternativo também é aplicável aos primeiro a quinto exemplos alternativos do codificador de fala 2 de acordo com a primeira modalidade e codificadores de fala de acordo com as segunda a quarta modalidades. Sétimo Exemplo Alternativo do Codificador de Fala 2 de Acordo com a Primeira Modalidade
[343] A unidade de geração de informação de controle de cálculo de envelope de tempo 2j gera a informação de controle de cálculo de envelope de tempo relacionada com o método de cálculo de envelope de tempo de baixa frequência no decodificador de fala 1 de acordo com as características de sinal de pelo menos um sinal do sinal X(j,i) no domínio da frequência obtido a partir da unidade de banco de filtro de divisão de banda 2c, um sinal de entrada externo recebido através do dispositivo de comunicação do codificador de fala 2, e o sinal de frequência baixa de subamostragem no domínio do tempo obtido como uma saída da unidade de subamostragem 2a. As características de sinal podem ser características transientes, tonalidade, características de ruído e similares do sinal, por exemplo, através das características de sinal não são limitados a esses exemplos específicos nesse exemplo alternativo.
[344] Note que esse exemplo alternativo também é aplicável aos primeiro a sexto exemplos alternativos do codificador de fala 2 de acordo com a primeira modalidade e os codificadores de fala de acordo com as segunda a quarta modalidades. Unidade de Quantização e Codificação do Codificador de Fala de Acordo com as Primeira a Quarta Modalidades
[345] Na unidade de quantização e decodificação 2g do codificador de fala de acordo com a primeira a quarta modalidades, o piso de ruído e o fator de escalonamento e o parâmetro que determina se ou não se adiciona uma senoide pode ser quantizada e codificada. Aplicabilidade Industrial
[346] A presente invenção é utilizada para um decodificador de fala, um codificador de fala, um método de decodificação de fala, um método de codificação de fala, um programa de decodificação de fala e um programa de codificação de fala e é possível se ajustar o envelope de tempo de um sinal decodificado em um formato menos distorcido e, dessa forma, obter um sinal reproduzido no qual o pré-eco e o pós-eco sejam reduzidos suficientemente. Listagem de Referência
[347] 1f1 ~1fn unidade de cálculo de envelope de tempo de frequência baixa; 2e1 ~2en unidade de cálculo de envelope de tempo de frequência baixa; 1, 102, 201, 301 decodificador de fala; 1a unidade de demultiplexação; 1b unidade de decodificação de frequência baixa; 1c unidade de banco de filtro de divisão de banda; 1d unidade de análise de sequência codificada; 1e unidade de quantização inversa; 1g unidade de cálculo de envelope de tempo; 1h unidade de geração de alta frequência; 1i unidade de ajuste de envelope de tempo; 1j unidade de banco de filtro de síntese de banda; 1k,1m,1n,1o unidade de controle de cálculo de envelope de tempo; 1p,1v unidade de ajuste de envelope de frequência e tempo; 1q unidade de sobreposição de envelope de frequência; 1r unidade de quantização inversa e decodificação de sequência codificada; 1s unidade de controle de cálculo de envelope de tempo; 1t unidade de ajuste de envelope; 1u unidade de sobreposição de envelope de frequência; 1w unidade de cálculo de envelope de frequência; 2, 102, 202, 302 codificador de fala; 2a unidade de subamostragem; 2b unidade de codificação de baixa frequência; 2c unidade de banco de filtro de divisão de banda; 2d informação suplementar para unidade de cálculo de geração de alta frequência; 2e1 ~2ek unidade de cálculo de envelope de tempo de baixa frequência; 2f unidade de cálculo de informação de envelope de tempo; 2g unidade de quantização e codificação; 2h unidade de construção de sequência codificada de alta frequência; 2i unidade de multiplexação; 2j unidade de geração de informação de controle de cálculo de envelope de tempo; 2k unidade de decodificação de baixa frequência; 2m unidade de banco de filtro de síntese de banda; 2n,2o,2p unidade de cálculo de informação de envelope de frequência.

Claims (15)

1. Decodificador de fala (1) que decodifica uma sequência codificada de sinal de fala codificado, compreendendo: meios de demultiplexação (1a) para demultiplexar a sequência codificada em uma sequência codificada de banda de baixa frequência e uma sequência codificada de banda de alta frequência; meios de decodificação de banda de baixa frequência (1b) para decodificar a sequência codificada de banda de baixa frequência demultiplexada pelos meios de demultiplexação (1a) e obter um sinal de banda de baixa frequência; meios de transformação de frequência (1c) para transformar o sinal de banda de baixa frequência obtido pelos meios de decodificação de banda de baixa frequência (1b), em um domínio da frequência; meios de análise de sequência codificada de banda de alta frequência (1d) para analisar a sequência codificada de banda de alta frequência demultiplexada pelos meios de demultiplexação (1a) e adquirir informação suplementar para geração de banda de alta frequência e informação de envelope de tempo; meios de quantização inversa e decodificação de sequência codificada (1e, 1r) para decodificar e quantizar de forma inversa a informação suplementar para geração de banda de alta frequência e a informação de envelope de tempo adquirida pelos meios de análise de sequência codificada de banda de alta frequência (1d); meios de geração de banda de alta frequência (1h) para gerar, utilizando a informação suplementar para geração de banda de alta frequência decodificada pelos meios de quantização inversa e decodificação de sequência codificada (1e, 1r), um sinal de banda de alta frequência do sinal de fala a partir do sinal de banda de baixa frequência; primeiros a N-ésimos (N é um inteiro igual a ou maior do que dois) meios de cálculo de envelope de tempo de banda de baixa frequência (1f1 a 1fn) para analisar o sinal de banda de baixa frequência transformado no domínio da frequência pelos meios de transformação de frequência (1c) e adquirir uma pluralidade de envelopes de tempo de banda de baixa frequência; meios de cálculo de envelope de tempo (1g) para calcular um envelope de tempo de banda de alta frequência utilizando a informação de envelope de tempo, que é adquirida pelos meios de quantização inversa e decodificação de sequência codificada (1e, 1r) e a pluralidade de envelopes de tempo de banda de baixa frequência, que são adquiridos pelos meios de cálculo de envelope de tempo de banda de baixa frequência (1f1 a 1fn); meios de ajuste de envelope de tempo (1i) para ajustar, utilizando o envelope de tempo adquirido pelos meios de cálculo de envelope de tempo (1g), um envelope de tempo do sinal de banda de alta frequência gerado pelos meios de geração de banda de alta frequência (1h); e meios de transformação de frequência inversa (1j) para adicionar o sinal de banda de alta frequência (Y(i,j)), que é ajustado pelos meios de ajuste de envelope de tempo (1i), e o sinal de banda de baixa frequência (X(j,i)), que é decodificado pelos meios de decodificação de banda de baixa frequência (1b), e emitir um sinal no domínio do tempo contendo componentes de banda de frequência inteiros, caracterizado pelo fato de que os meios de cálculo de envelope de tempo (1g) são configurados para calcular o envelope de tempo de banda de alta frequência pela realização de um processamento necessariamente utilizando a pluralidade de envelopes de tempo de banda de baixa frequência, selecionados com base na informação de envelope de tempo a partir de uma pluralidade de processamentos especificados utilizando diferentes fórmulas preparadas de antemão.
2. Decodificador de fala (1), de acordo com a reivindicação 1, caracterizado pelo fato de que os meios de análise de sequência codificada de banda de alta frequência (1d) são configurados para adquirir adicionalmente informação suplementar codificada para geração de banda de alta frequência e informação de envelope de frequência; em que os meios de quantização inversa e decodificação de sequência codificada (1e, 1r) são configurados para decodificar e quantizar de forma inversa a informação suplementar para geração de banda de alta frequência, a informação de envelope de frequência, e a informação de envelope de tempo adquiridas pelos meios de análise de sequência codificada de banda de alta frequência (1d); em que o decodificador de fala (1) compreende adicionalmente meios de cálculo de envelope de frequência (1w) para calcular um envelope de frequência utilizando a informação de envelope de frequência adquirida pelos meios de quantização inversa e decodificação de sequência codificada (1e, 1r); em que os meios de ajuste de envelope de tempo (1i) compreendem meios de ajuste de envelope de tempo e frequência (1p, 1v) para ajustar, utilizando o envelope de tempo adquirido pelos meios de cálculo de envelope de tempo (1g) e o envelope de frequência adquirido pelos meios de cálculo de envelope de frequência (1w), o envelope de tempo e um envelope de frequência dos componentes de banda de alta frequência gerados pelos meios de geração de banda de alta frequência (1h).
3. Decodificador de fala (1), de acordo com a reivindicação 1 ou 2, caracterizado pelo fato de que compreende adicionalmente: meios de controle de cálculo de envelope de tempo (1k, 1m, 1n, 1o), para controlar, utilizando o sinal de banda de baixa frequência transformado no domínio da frequência pelos meios de transformação de frequência (1c), pelo menos um dentre (i) cálculo dos envelopes de tempo de banda de baixa frequência nos primeiros a N-ésimos meios de cálculo de envelope de tempo de banda de baixa frequência (1f1 a 1fn) e (ii) cálculo do envelope de tempo de banda de alta frequência nos meios de cálculo de envelope de tempo (1g).
4. Decodificador de fala (1), de acordo com a reivindicação 1 ou 2, caracterizado pelo fato de que compreende adicionalmente: meios de controle de cálculo de envelope de tempo (1k, 1m, 1n, 1o) para controlar, utilizando a informação de envelope de tempo adquirida pelos meios de quantização inversa e decodificação de sequência codificada (1e, 1r), pelo menos um dentre (i) cálculo dos envelopes de tempo de banda de baixa frequência nos primeiros a N-ésimos meios de cálculo de envelope de tempo de banda de baixa frequência (1f1 a 1fn) e (ii) cálculo do envelope de tempo de banda de alta frequência nos meios de cálculo de envelope de tempo (1g).
5. Decodificador de fala (1), de acordo com a reivindicação 1 ou 2, caracterizado pelo de que: os meios de análise de sequência codificada de banda de alta frequência (1d) adquirem adicionalmente informação de controle de cálculo de envelope de tempo, e o decodificador de fala (1) compreende adicionalmente meios de controle de cálculo de envelope de tempo (1k, 1m, 1n, 1o) para controlar, utilizando a informação de controle de cálculo de envelope de tempo adquirida pelos meios de análise de sequência codificada de banda de alta frequência (1d), pelo menos um dentre (i) cálculo dos envelopes de tempo de banda de baixa frequência nos primeiros a N-ésimos meios de cálculo de envelope de tempo de banda de baixa frequência (1f1 a 1fn) e (ii) cálculo do envelope de tempo de banda de alta frequência nos meios de cálculo de envelope de tempo (1g).
6. Decodificador de fala (1), de acordo com a reivindicação 1 ou 2, caracterizado pelo fato de que: os meios de análise de sequência codificada de banda de alta frequência (1d) adquire adicionalmente informação de controle de cálculo de envelope de tempo, os meios de quantização inversa e decodificação de sequência codificada (1e, 1r) adquirem adicionalmente segunda informação de envelope de frequência, e o decodificador de fala (1) compreende adicionalmente meios de controle de cálculo de envelope de tempo (1k, 1m, 1n, 1o) para determinar, com base na informação de controle de cálculo de envelope de tempo, se ajusta o envelope de frequência dos componentes de banda de alta frequência com base na segunda informação de envelope de frequência e, quando é determinado ajustar o envelope de frequência, controlar para não realizar o cálculo dos envelopes de tempo de banda de baixa frequência nos primeiros a N-ésimos meios de cálculo de envelope de tempo de banda de baixa frequência (1f1 a 1fn) ou cálculo do envelope de tempo de banda de alta frequência nos meios de cálculo de envelope de tempo (1g).
7. Codificador de fala (2) que codifica um sinal de fala, compreendendo: meios de transformação de frequência (2c) para transformar o sinal de fala em um domínio da frequência; meios de subamostragem (2a) para subamostrar o sinal de fala e adquirir um sinal de banda de baixa frequência; meios de codificação de banda baixa frequência (2b) para codificar o sinal de banda de baixa frequência adquirido pelos meios de subamostragem (2a); primeiros a N-ésimos (N é um inteiro igual a ou maior do que dois) meios de cálculo de envelope de tempo de banda de baixa frequência (2e1 a 2en) para calcular uma pluralidade de envelopes de tempo de componentes de banda de baixa frequência do sinal de fala transformado no domínio da frequência pelos meios de transformação de frequência (2c); meios de cálculo de informação de envelope de tempo (2f) para calcular, utilizando os envelopes de tempo dos componentes de banda de baixa frequência calculados pelos primeiros a N-ésimos meios de cálculo de envelope de tempo de banda de baixa frequência (2e1 a 2en), informação de envelope de tempo necessária para adquirir um envelope de tempo dos componentes de banda de alta frequência do sinal de fala transformado pelos meios de transformação de frequência (2c); meios de cálculo de informação suplementar (2d) para analisar o sinal de fala e calcular informação suplementar para geração de banda de alta frequência a ser utilizada para gerar os componentes de banda de alta frequência a partir do sinal de banda de baixa frequência; meios de quantização e codificação (2g) para quantizar e codificar a informação suplementar para geração de banda de alta frequência, que é gerada pelos meios de cálculo de informação suplementar (2d) e a informação de envelope de tempo, que é calculada pelos meios de cálculo de informação de envelope de tempo (2f); meios de construção de sequência codificada (2h) para construir uma sequência codificada de banda de alta frequência a partir da informação suplementar para geração de banda de alta frequência e a informação de envelope de tempo quantizada e codificada pelos meios de quantização e codificação (2g); e meios de multiplexação (2i) para gerar uma sequência codificada na qual a sequência codificada de banda de baixa frequência, que é adquirida pelos meios de codificação de banda de baixa frequência (2b), e a sequência codificada de banda de alta frequência, que é construída pelos meios de construção de sequência codificada (2h), são multiplexadas, caracterizado pelo fato de que os meios de cálculo de informação de envelope de tempo (2f) são configurados para calcular a informação de envelope de tempo utilizada para selecionar um processamento a partir de uma pluralidade de processamentos especificados utilizando diferentes fórmulas para adquirir o envelope de tempo para componentes de banda de alta frequência necessariamente a partir da pluralidade de envelopes de tempo de banda de baixa frequência.
8. Codificador de fala (2), de acordo com a reivindicação 7, caracterizado pela fato de que compreende adicionalmente: meios de cálculo de informação de envelope de frequência (2n, 2o, 2p) para calcular informação de envelope de frequência dos componentes de banda de alta frequência do sinal de fala transformado no domínio da frequência pelos meios de transformação de frequência (2c), em que os meios de quantização e codificação (2g) quantizam e codificam adicionalmente a informação de envelope de frequência, e os meios de construção de sequência codificada (2h) constroem a sequência codificada de banda de alta frequência pela adição ainda da informação de envelope de frequência quantizada e codificada pelos meios de quantização e codificação (2g).
9. Codificador de fala (2), de acordo com a reivindicação 7 ou 8, caracterizado pela fato de que compreende adicionalmente: meios de geração de informação de controle (2j) para gerar informação de controle de cálculo de envelope de tempo que controla o cálculo de envelope de tempo em um decodificador de fala utilizando pelo menos um dentre (i) o sinal de fala transformado no domínio da frequência pelos meios de transformação de frequência (2c) e (ii) a informação de envelope de tempo calculada pelos meios de cálculo de informação de envelope de tempo (2f), em que os meios de construção de sequência codificada (2h) constroem a sequência codificada de banda de alta frequência pela adição ainda da informação de controle de cálculo de envelope de tempo gerada pelos meios de geração de informação de controle (2j).
10. Codificador de fala (2), de acordo com qualquer uma das reivindicações 7 a 9, caracterizado pela fato de que: os meios de cálculo de informação de envelope de tempo (2f) calculam um envelope de tempo de componentes de banda de alta frequência do sinal de fala transformado no domínio da frequência pelos meios de transformação de frequência (2c) e calculam a informação de envelope de tempo com base na correlação entre um envelope de tempo calculado a partir dos primeiros a N- enésimos envelopes de tempo de componentes de banda de baixa frequência e o envelope de tempo dos componentes de frequência.
11. Método de decodificação de fala de decodificação de uma sequência codificada gerada pela codificação de um sinal de fala, compreendendo: uma etapa de demultiplexação, realizada pelos meios de demultiplexação (1a), de demultiplexar a sequência codificada em uma sequência codificada de banda de baixa frequência e uma sequência codificada de banda de alta frequência; uma etapa de decodificação de banda de baixa frequência, realizada pelos meios de decodificação de banda de baixa frequência (1b), de decodificar a sequência codificada de banda de baixa frequência demultiplexada pelos meios de demultiplexação (1a) e obter um sinal de banda de baixa frequência; uma etapa de transformação de frequência, realizada pelos meios de transformação de frequência (1c), de transformar o sinal de banda de baixa frequência obtido pelos meios de decodificação de banda de baixa frequência (1b) em um domínio da frequência; uma etapa de análise de sequência codificada de banda de alta frequência, realizada pelos meios de análise de sequência codificada de banda de alta frequência (1d), de analisar a sequência codificada de banda de alta frequência demultiplexada pelos meios de demultiplexação (1a) e adquirir informação suplementar codificada para geração de banda de alta frequência e informação de envelope de tempo; uma etapa de quantização inversa e decodificação de sequência codificada, realizada pelos meios de quantização inversa e decodificação de sequência codificada (1e, 1r), de decodificar e quantizar de forma inversa a informação suplementar para a geração de banda de alta frequência e a informação de envelope de tempo adquirida pelos meios de análise de sequência codificada de banda de alta frequência (1d); uma etapa de geração de banda de alta frequência, realizada pelos meios de geração de banda de alta frequência (1h), de gerar, utilizando informação suplementar para a geração de banda de alta frequência decodificada pelos meios de quantização inversa e decodificação de sequência codificada (1e, 1r), um sinal de banda de alta frequência do sinal de fala a partir do sinal de banda de baixa frequência; uma primeira a N-ésima (N é um inteiro igual a ou maior do que dois) etapa de cálculo de envelope de tempo de banda de baixa frequência, realizada pelos primeiros a N-ésimos meios de cálculo de envelope de tempo de banda de baixa frequência (1f1 a 1fn), de analisar o sinal de banda de baixa frequência transformado no domínio da frequência pelos meios de transformação de frequência (1c) e adquirir uma pluralidade de envelopes de tempo de banda de baixa frequência; uma etapa de cálculo de envelope de tempo, realizada pelos meios de cálculo de envelope de tempo (1g), de calcular um envelope de tempo de banda de alta frequência utilizando a informação de envelope de tempo, que é adquirida pelos meios de quantização inversa e decodificação de sequência codificada (1e, 1r), e a pluralidade de envelopes de tempo de banda de baixa frequência, que são adquiridos pelos meios de cálculo de envelope de tempo de banda de baixa frequência (1f1 a 1fn); uma etapa de ajuste de envelope de tempo, realizada pelos meios de ajuste de envelope de tempo (1i), de ajustar um envelope de tempo dos sinais de banda de alta frequência gerados pelos meios de geração de banda de alta frequência (1h) utilizando o envelope de tempo adquirido pelos meios de cálculo de envelope de tempo (1g); e uma etapa de transformação de frequência inversa, realizada pelos meios de transformação de frequência inversa (1j), de adicionar o sinal de banda de alta frequência, que é ajustado pelos meios de ajuste de envelope de tempo (1i), e o sinal de banda de baixa frequência, que é decodificado pelos meios de decodificação de banda de baixa frequência (1b), e emitir um sinal no domínio do tempo contendo componentes de banda de frequência inteiros, caracterizado pelo fato de que a etapa de cálculo de envelope de tempo inclui calcular o envelope de tempo de banda de alta frequência pela realização de um processamento necessariamente utilizando a pluralidade de envelopes de tempo de banda de baixa frequência, selecionados com base na informação de envelope de tempo a partir de uma pluralidade de processamentos especificados utilizando diferentes fórmulas preparadas de antemão.
12. Método de decodificação de fala, de acordo com a reivindicação 11, caracterizado pelo fato de que a etapa de análise de sequência codificada de banda de alta frequência adicionalmente compreende adquirir informação suplementar codificada para geração de banda de alta frequência e informação de envelope de frequência; em que a etapa de quantização inversa e decodificação de sequência codificada compreende decodificar e quantizar de forma inversa informação suplementar para geração de banda de alta frequência, a informação de envelope de frequência, e a informação de envelope de tempo adquiridas pelos meios de análise de sequência codificada de banda de alta frequência (1d); em que o método adicionalmente compreende uma etapa de cálculo de envelope de frequência, realizada pelos meios de cálculo de envelope de frequência (1w), de calcular um envelope de frequência utilizando a informação de envelope de frequência adquirida pelos meios de quantização inversa e decodificação de sequência codificada (1e, 1r); em que a etapa de ajuste de envelope de tempo compreende uma etapa de ajuste de envelope de tempo e frequência, realizada pelos meios de ajuste de envelope de tempo e frequência (1p, 1v) dos meios de ajuste de envelope de tempo (1i), de ajustar, utilizando o envelope de tempo adquirido pelos meios de cálculo de envelope de tempo (1g) e o envelope de frequência adquirido pelos meios de cálculo de envelope de frequência (1w), um envelope de tempo e um envelope de frequência dos componentes de banda de alta frequência gerados pelos meios de geração de banda de alta frequência (1h).
13. Método de codificação de fala de codificação de um sinal de fala, compreendendo: uma etapa de transformação de frequência, realizada pelos meios de transformação de frequência (2c), de transformar o sinal de fala em um domínio da frequência; uma etapa de subamostragem, realizada pelos meios de subamostragem (2a), de subamostrar o sinal de fala e adquirir um sinal de banda de baixa frequência; uma etapa de codificação de banda de baixa frequência, realizada pelos meios de codificação de banda de baixa frequência (2b), de codificar o sinal de banda de baixa frequência adquirido pelos meios de subamostragem (2a); uma primeira a N-ésima (N é um inteiro igual a ou maior do que dois) etapa de cálculo de envelope de tempo de banda de baixa frequência, realizada pelos primeiros a N-ésimos meios de cálculo de envelope de tempo de banda de baixa frequência (2e1 a 2en), de calcular uma pluralidade de envelopes de tempo de componentes de banda de baixa frequência do sinal de fala transformados no domínio da frequência pelos meios de transformação de frequência (2c); uma etapa de cálculo de informação de envelope de tempo, realizada pelos meios de cálculo de informação de envelope de tempo (2f), de calcular, utilizando os envelopes de tempo dos componentes de banda de baixa frequência calculados pelos primeiros a N-ésimos meios de cálculo de envelope de tempo de banda de baixa frequência (2e1 a 2en), informação de envelope de tempo necessária para adquirir um envelope de tempo de componentes de banda de alta frequência do sinal de fala transformado pelos meios de transformação de frequência (2c); uma etapa de cálculo de informação suplementar, realizada pelos meios de cálculo de informação suplementar (2d), de analisar o sinal de fala e calcular informação suplementar para a geração de banda de alta frequência a ser utilizada para gerar componentes de banda de alta frequência a partir do sinal de bande baixa frequência; uma etapa de quantização e codificação, realizada pelos meios de quantização e codificação (2g), de quantizar e codificar a informação suplementar para a geração de bandas de alta frequência, que é gerada pelos meios de cálculo de informação suplementar (2d), e a informação de envelope de tempo, que é calculada pelos meios de cálculo de informação de envelope de tempo (2f); uma etapa de construção da sequência codificada, realizada pelos meios de construção de sequência codificada (2h), de construir uma sequência codificada de banda de alta frequência a partir da informação suplementar para a geração de banda de alta frequência e a informação de envelope de tempo quantizada e codificada pelos meios de quantização e codificação (2g); e uma etapa de multiplexação, realizada pelos meios de multiplexação (2i), de gerar uma sequência codificada na qual a sequência codificada de banda de baixa frequência, que é adquirida pelos meios de codificação de banda de baixa frequência (2b), e a sequência codificada de banda de alta frequência, que é construída pelos meios de construção de sequência codificada (2h), são multiplexadas, caracterizado pelo fato de que a etapa de cálculo de informação de envelope de tempo inclui calcular a informação de envelope de tempo utilizada para selecionar um processamento a partir de uma pluralidade de processamentos especificados utilizando diferentes fórmulas para adquirir o envelope de tempo para componentes de banda de alta frequência necessariamente a partir da pluralidade de envelopes de tempo de banda de baixa frequência.
14. Memória legível por computador caracterizada pelo fato de que compreende instruções que, quando executadas por um computador, fazem com que o computador execute as etapas do método como definido nas reivindicações 11 a 12.
15. Memória legível por computador caracterizada pelo fato de que compreende instruções que, quando executadas por um computador, fazem com que o computador execute as etapas do método como definido na reivindicação 13.
BR112013020987-9A 2011-02-18 2012-02-16 Decodificador de fala, codificador de fala, método de decodificação de fala, método decodificação de fala e memórias legíveis por computador. BR112013020987B1 (pt)

Priority Applications (1)

Application Number Priority Date Filing Date Title
BR122019027753-2A BR122019027753B1 (pt) 2011-02-18 2012-02-16 codificador de fala e método de codificação de fala

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2011033917 2011-02-18
JP2011-033917 2011-02-18
JP2011215591 2011-09-29
JP2011-215591 2011-09-29
PCT/JP2012/053700 WO2012111767A1 (ja) 2011-02-18 2012-02-16 音声復号装置、音声符号化装置、音声復号方法、音声符号化方法、音声復号プログラム、及び音声符号化プログラム

Publications (2)

Publication Number Publication Date
BR112013020987A2 BR112013020987A2 (pt) 2016-10-11
BR112013020987B1 true BR112013020987B1 (pt) 2021-01-19

Family

ID=46672679

Family Applications (2)

Application Number Title Priority Date Filing Date
BR112013020987-9A BR112013020987B1 (pt) 2011-02-18 2012-02-16 Decodificador de fala, codificador de fala, método de decodificação de fala, método decodificação de fala e memórias legíveis por computador.
BR122019027753-2A BR122019027753B1 (pt) 2011-02-18 2012-02-16 codificador de fala e método de codificação de fala

Family Applications After (1)

Application Number Title Priority Date Filing Date
BR122019027753-2A BR122019027753B1 (pt) 2011-02-18 2012-02-16 codificador de fala e método de codificação de fala

Country Status (19)

Country Link
US (1) US8756068B2 (pt)
EP (5) EP4020466B1 (pt)
JP (7) JP5977176B2 (pt)
KR (7) KR102208914B1 (pt)
CN (2) CN104916290B (pt)
AU (1) AU2012218409B2 (pt)
BR (2) BR112013020987B1 (pt)
CA (4) CA3055514C (pt)
DK (5) DK3998607T3 (pt)
ES (4) ES2949240T3 (pt)
FI (2) FI4020466T3 (pt)
HU (3) HUE058682T2 (pt)
MX (2) MX339764B (pt)
PL (4) PL3567589T3 (pt)
PT (4) PT3407352T (pt)
RU (8) RU2630379C1 (pt)
SG (1) SG192796A1 (pt)
TW (3) TWI576830B (pt)
WO (1) WO2012111767A1 (pt)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104916290B (zh) * 2011-02-18 2018-11-06 株式会社Ntt都科摩 语音解码装置、语音编码装置、语音解码方法以及语音编码方法
JP5997592B2 (ja) * 2012-04-27 2016-09-28 株式会社Nttドコモ 音声復号装置
US11037923B2 (en) 2012-06-29 2021-06-15 Intel Corporation Through gate fin isolation
TWI477789B (zh) * 2013-04-03 2015-03-21 Tatung Co 資訊擷取裝置及其發送頻率調整方法
JP6407150B2 (ja) 2013-06-11 2018-10-17 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ 音響信号の帯域幅拡張を行う装置及び方法
KR102185478B1 (ko) 2014-02-28 2020-12-02 프라운호퍼-게젤샤프트 추르 푀르데룽 데어 안제반텐 포르슝 에 파우 복호 장치, 부호화 장치, 복호 방법, 및 부호화 방법
JP2016038435A (ja) * 2014-08-06 2016-03-22 ソニー株式会社 符号化装置および方法、復号装置および方法、並びにプログラム
CN107925388B (zh) * 2016-02-17 2021-11-30 弗劳恩霍夫应用研究促进协会 后置处理器、预处理器、音频编解码器及相关方法
TWI602173B (zh) * 2016-10-21 2017-10-11 盛微先進科技股份有限公司 音訊處理方法與非暫時性電腦可讀媒體
EP3396670B1 (en) * 2017-04-28 2020-11-25 Nxp B.V. Speech signal processing
US10650834B2 (en) 2018-01-10 2020-05-12 Savitech Corp. Audio processing method and non-transitory computer readable medium
JP7139628B2 (ja) * 2018-03-09 2022-09-21 ヤマハ株式会社 音処理方法および音処理装置
EP3576088A1 (en) * 2018-05-30 2019-12-04 Fraunhofer Gesellschaft zur Förderung der Angewand Audio similarity evaluator, audio encoder, methods and computer program

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3982070A (en) * 1974-06-05 1976-09-21 Bell Telephone Laboratories, Incorporated Phase vocoder speech synthesis system
SE512719C2 (sv) * 1997-06-10 2000-05-02 Lars Gustaf Liljeryd En metod och anordning för reduktion av dataflöde baserad på harmonisk bandbreddsexpansion
JP2000122698A (ja) * 1998-10-19 2000-04-28 Mitsubishi Electric Corp 音声符号化装置
US7260523B2 (en) * 1999-12-21 2007-08-21 Texas Instruments Incorporated Sub-band speech coding system
JP2001318698A (ja) * 2000-05-10 2001-11-16 Nec Corp 音声符号化装置及び音声復号化装置
JP3404024B2 (ja) * 2001-02-27 2003-05-06 三菱電機株式会社 音声符号化方法および音声符号化装置
SE0202159D0 (sv) * 2001-07-10 2002-07-09 Coding Technologies Sweden Ab Efficientand scalable parametric stereo coding for low bitrate applications
US20030187663A1 (en) * 2002-03-28 2003-10-02 Truman Michael Mead Broadband frequency translation for high frequency regeneration
US7987095B2 (en) * 2002-09-27 2011-07-26 Broadcom Corporation Method and system for dual mode subband acoustic echo canceller with integrated noise suppression
KR100587953B1 (ko) * 2003-12-26 2006-06-08 한국전자통신연구원 대역-분할 광대역 음성 코덱에서의 고대역 오류 은닉 장치 및 그를 이용한 비트스트림 복호화 시스템
KR100657916B1 (ko) * 2004-12-01 2006-12-14 삼성전자주식회사 주파수 대역간의 유사도를 이용한 오디오 신호 처리 장치및 방법
KR100721537B1 (ko) * 2004-12-08 2007-05-23 한국전자통신연구원 광대역 음성 부호화기의 고대역 음성 부호화 장치 및 그방법
KR100708121B1 (ko) * 2005-01-22 2007-04-16 삼성전자주식회사 음성 신호의 대역 확장 방법 및 장치
JP4448464B2 (ja) * 2005-03-07 2010-04-07 日本電信電話株式会社 雑音低減方法、装置、プログラム及び記録媒体
UA91853C2 (ru) * 2005-04-01 2010-09-10 Квелкомм Инкорпорейтед Способ и устройство для векторного квантования спектрального представления огибающей
BRPI0608269B8 (pt) * 2005-04-01 2019-09-03 Qualcomm Inc método e aparelho para quantização vetorial de uma representação de envelope espectral
DE602006004959D1 (de) * 2005-04-15 2009-03-12 Dolby Sweden Ab Zeitliche hüllkurvenformgebung von entkorrelierten signalen
US7953605B2 (en) * 2005-10-07 2011-05-31 Deepen Sinha Method and apparatus for audio encoding and decoding using wideband psychoacoustic modeling and bandwidth extension
WO2009059633A1 (en) * 2007-11-06 2009-05-14 Nokia Corporation An encoder
CN101483495B (zh) * 2008-03-20 2012-02-15 华为技术有限公司 一种背景噪声生成方法以及噪声处理装置
JP5203077B2 (ja) * 2008-07-14 2013-06-05 株式会社エヌ・ティ・ティ・ドコモ 音声符号化装置及び方法、音声復号化装置及び方法、並びに、音声帯域拡張装置及び方法
EP2146344B1 (en) * 2008-07-17 2016-07-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio encoding/decoding scheme having a switchable bypass
US8352279B2 (en) * 2008-09-06 2013-01-08 Huawei Technologies Co., Ltd. Efficient temporal envelope coding approach by prediction between low band signal and high band signal
EP2620941B1 (en) * 2009-01-16 2019-05-01 Dolby International AB Cross product enhanced harmonic transposition
EP2239732A1 (en) * 2009-04-09 2010-10-13 Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. Apparatus and method for generating a synthesis audio signal and for encoding an audio signal
JP4932917B2 (ja) 2009-04-03 2012-05-16 株式会社エヌ・ティ・ティ・ドコモ 音声復号装置、音声復号方法、及び音声復号プログラム
CN104916290B (zh) * 2011-02-18 2018-11-06 株式会社Ntt都科摩 语音解码装置、语音编码装置、语音解码方法以及语音编码方法

Also Published As

Publication number Publication date
KR102208914B1 (ko) 2021-01-27
RU2599966C2 (ru) 2016-10-20
CN103370742A (zh) 2013-10-23
ES2745141T3 (es) 2020-02-27
ES2916257T3 (es) 2022-06-29
MX2013009464A (es) 2013-12-06
RU2651193C1 (ru) 2018-04-18
EP3998607A1 (en) 2022-05-18
KR20200003943A (ko) 2020-01-10
TW201706983A (zh) 2017-02-16
EP3998607B1 (en) 2024-03-27
PT3567589T (pt) 2022-05-19
EP3567589A1 (en) 2019-11-13
RU2707931C1 (ru) 2019-12-02
US8756068B2 (en) 2014-06-17
JP2017194716A (ja) 2017-10-26
EP3407352B9 (en) 2022-08-10
HUE058847T2 (hu) 2022-09-28
EP2677519A1 (en) 2013-12-25
JP2019091074A (ja) 2019-06-13
JP2022043334A (ja) 2022-03-15
EP4020466A1 (en) 2022-06-29
RU2674922C1 (ru) 2018-12-13
DK4020466T3 (da) 2023-06-26
CA3055514A1 (en) 2012-08-23
TWI547941B (zh) 2016-09-01
RU2013142349A (ru) 2015-03-27
KR20220106233A (ko) 2022-07-28
BR112013020987A2 (pt) 2016-10-11
KR20140005256A (ko) 2014-01-14
RU2630379C1 (ru) 2017-09-07
KR102375912B1 (ko) 2022-03-16
EP4020466B1 (en) 2023-05-10
WO2012111767A1 (ja) 2012-08-23
SG192796A1 (en) 2013-09-30
CA2984936A1 (en) 2012-08-23
KR20220035287A (ko) 2022-03-21
CA2827482C (en) 2018-01-02
ES2913760T3 (es) 2022-06-06
TWI576830B (zh) 2017-04-01
RU2718425C1 (ru) 2020-04-02
HUE062540T2 (hu) 2023-11-28
FI3998607T3 (fi) 2024-04-22
EP2677519B1 (en) 2019-08-14
KR102068112B1 (ko) 2020-01-20
DK2677519T3 (da) 2019-09-23
PT4020466T (pt) 2023-06-27
JP5977176B2 (ja) 2016-08-24
KR102424902B1 (ko) 2022-07-22
MX339764B (es) 2016-06-08
CA2827482A1 (en) 2012-08-23
BR122019027753B1 (pt) 2021-04-20
AU2012218409A1 (en) 2013-09-12
CA2984936C (en) 2019-10-29
EP2677519A4 (en) 2016-10-19
JP7009602B2 (ja) 2022-01-25
EP3407352B1 (en) 2022-05-11
KR20200142110A (ko) 2020-12-21
TW201637001A (zh) 2016-10-16
PL4020466T3 (pl) 2023-09-25
JP6189498B2 (ja) 2017-08-30
PT3407352T (pt) 2022-06-07
EP3567589B1 (en) 2022-04-06
PL3407352T3 (pl) 2022-08-08
JP2021043471A (ja) 2021-03-18
US20130339010A1 (en) 2013-12-19
JP7252381B2 (ja) 2023-04-04
KR102565287B1 (ko) 2023-08-08
FI4020466T3 (fi) 2023-06-14
RU2679973C1 (ru) 2019-02-14
CA3055514C (en) 2022-05-17
PL3567589T3 (pl) 2022-06-06
PT2677519T (pt) 2019-09-30
JPWO2012111767A1 (ja) 2014-07-07
TW201301263A (zh) 2013-01-01
KR20170070286A (ko) 2017-06-21
JP6810292B2 (ja) 2021-01-06
CN104916290B (zh) 2018-11-06
JP2016218464A (ja) 2016-12-22
ES2949240T3 (es) 2023-09-26
RU2742199C1 (ru) 2021-02-03
DK3567589T3 (da) 2022-05-09
JP6664526B2 (ja) 2020-03-13
EP3407352A1 (en) 2018-11-28
CN103370742B (zh) 2015-06-03
PL2677519T3 (pl) 2019-12-31
CA3147525A1 (en) 2012-08-23
TWI563499B (pt) 2016-12-21
AU2012218409B2 (en) 2016-09-15
DK3407352T3 (da) 2022-06-07
HUE058682T2 (hu) 2022-09-28
KR20180089567A (ko) 2018-08-08
DK3998607T3 (da) 2024-04-15
JP2020077012A (ja) 2020-05-21
CN104916290A (zh) 2015-09-16
JP6510593B2 (ja) 2019-05-08

Similar Documents

Publication Publication Date Title
BR112013020987B1 (pt) Decodificador de fala, codificador de fala, método de decodificação de fala, método decodificação de fala e memórias legíveis por computador.

Legal Events

Date Code Title Description
B06F Objections, documents and/or translations needed after an examination request according [chapter 6.6 patent gazette]
B06U Preliminary requirement: requests with searches performed by other patent offices: procedure suspended [chapter 6.21 patent gazette]
B09A Decision: intention to grant [chapter 9.1 patent gazette]
B16A Patent or certificate of addition of invention granted [chapter 16.1 patent gazette]

Free format text: PRAZO DE VALIDADE: 20 (VINTE) ANOS CONTADOS A PARTIR DE 16/02/2012, OBSERVADAS AS CONDICOES LEGAIS.

B21F Lapse acc. art. 78, item iv - on non-payment of the annual fees in time

Free format text: REFERENTE A 12A ANUIDADE.

B21H Decision of lapse of a patent or of a certificate of addition of invention cancelled [chapter 21.8 patent gazette]

Free format text: ANULADA A PUBLICACAO CODIGO 21.6 NA RPI NO 2762 DE 12/12/2023 POR TER SIDO INDEVIDA.