ES2967257T3 - Codificación por transformada modificada deformada temporal de señales de audio - Google Patents

Codificación por transformada modificada deformada temporal de señales de audio Download PDF

Info

Publication number
ES2967257T3
ES2967257T3 ES21156798T ES21156798T ES2967257T3 ES 2967257 T3 ES2967257 T3 ES 2967257T3 ES 21156798 T ES21156798 T ES 21156798T ES 21156798 T ES21156798 T ES 21156798T ES 2967257 T3 ES2967257 T3 ES 2967257T3
Authority
ES
Spain
Prior art keywords
frame
sequence
signal
audio signal
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES21156798T
Other languages
English (en)
Inventor
Lars Villemoes
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dolby International AB
Original Assignee
Dolby International AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dolby International AB filed Critical Dolby International AB
Application granted granted Critical
Publication of ES2967257T3 publication Critical patent/ES2967257T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/002Dynamic bit allocation
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/022Blocking, i.e. grouping of samples in time; Choice of analysis windows; Overlap factoring
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/04Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using predictive techniques
    • G10L19/06Determination or coding of the spectral characteristics, e.g. of the short-term prediction coefficients
    • HELECTRICITY
    • H03ELECTRONIC CIRCUITRY
    • H03MCODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M7/00Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
    • H03M7/30Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/02Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders
    • G10L19/0212Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis using spectral analysis, e.g. transform vocoders or subband vocoders using orthogonal transformation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Reduction Or Emphasis Of Bandwidth Of Signals (AREA)

Abstract

Una representación espectral de una señal de audio que tiene tramas de audio consecutivas se puede derivar de manera más eficiente cuando se estima una deformación temporal común para dos tramas vecinas cualesquiera, de modo que una transformación de bloque siguiente pueda utilizar adicionalmente la información de deformación. Por tanto, se pueden derivar y aplicar las funciones de ventana necesarias para la aplicación exitosa de un procedimiento de superposición y adición durante la reconstrucción, anticipando ya las funciones de ventana el remuestreo de la señal debido a la distorsión del tiempo. Por lo tanto, la mayor eficiencia de la codificación por transformada basada en bloques de señales deformadas en el tiempo se puede utilizar sin introducir discontinuidades audibles. (Traducción automática con Google Translate, sin valor legal)

Description

DESCRIPCIÓN
Codificación por transformada modificada deformada temporal de señales de audio
Referencia cruzada a solicitudes relacionadas
Esta solicitud es una solicitud divisional europea de la solicitud de patente europea EP 17193127.2 (referencia: CT-034EP04), para la que se presentó el formulario 1001 de la OEP el 26 de septiembre de 2017.
Campo de la invención
La presente invención se refiere a sistemas de codificación de fuentes de audio y, en particular, a esquemas de codificación de audio que utilizan transformadas basadas en bloques.
Antecedentes de la invención y técnica anterior
Se conocen en la técnica diversas formas de codificar contenido de audio y vídeo. Generalmente, por supuesto, el objetivo es codificar el contenido de forma que ahorre bits sin degradar la calidad de reconstrucción de la señal.
Recientemente, se han desarrollado nuevos enfoques para codificar contenido de audio y video, entre los cuales la codificación de audio perceptual basada en transformadas logra la mayor ganancia de codificación para señales estacionarias, es decir, cuando se pueden aplicar grandes magnitudes de transformadas. (Véase por ejemplo, T. Painter y A. Spanias: "Perceptual coding of digital audio", Actas IEEE, vol. 88, n°. 4, abril de 2000, páginas 451-513). Las partes estacionarias de audio a menudo están bien modeladas por un número finito fijo de sinusoides estacionarias. Una vez que la magnitud de la transformada es lo suficientemente grande para resolver esos componentes, se requiere un número fijo de bits para un objetivo de distorsión dado. Al aumentar aún más el tamaño de la transformada, se describirán segmentos cada vez más grandes de la señal de audio sin aumentar la demanda de bits. Sin embargo, para señales no estacionarias, es necesario reducir el tamaño de la transformada y así la ganancia de codificación disminuirá rápidamente. Para superar este problema, para cambios abruptos y eventos transitorios, se puede aplicar el cambio de magnitud de la transformada sin incrementar significativamente el coste medio de codificación. Es decir, cuando se detecta un evento transitorio, se reduce el tamaño del bloque (tamaño de trama) de las muestras que se codificarán juntas. Para señales transitorias más persistentemente, la tasa de bits, por supuesto, aumentará drásticamente.
Un ejemplo particularmente interesante de comportamiento transitorio persistente es la variación de tono de las señales armónicas localmente, que se encuentran principalmente en las partes vocales del habla y del canto, pero también se pueden originar a partir de los vibratos y glissandos de algunos instrumentos musicales. Al tener una señal armónica, es decir, una señal que tiene picos de señal distribuidos con un espaciado igual a lo largo del eje del tiempo, el término tono describe el inverso del tiempo entre picos contiguos de la señal. Por tanto, una señal de este tipo tiene un espectro armónico por pie, que consta de una frecuencia base igual al tono y armónicos de orden superior. En términos más generales, el tono se puede definir como el inverso del tiempo entre dos porciones vecinas de la señal correspondiente dentro de una señal localmente armónica. Sin embargo, si el tono y así la frecuencia base varía con el tiempo, como es el caso de los sonidos vocales, el espectro se volverá cada vez más complejo y así más ineficaz de codificar.
Un parámetro estrechamente relacionado con el tono de una señal es la deformación de la señal. Suponiendo que la señal temporal t tiene un tono igual a p(t) y que este valor de tono varía suavemente con el tiempo, la deformación de la señal temporal t viene definida por la derivada logarítmica
Para una señal armónica, esta definición de deformación es insensible a la elección particular del componente armónico y a los errores sistemáticos en términos de múltiplos o fracciones del tono. La deformación mide un cambio de frecuencia en el dominio logarítmico. La unidad natural de deformación es Hertz [Hz], pero en términos musicales, una señal con deformación constante a(t)=a<0>, es un barrido con una velocidad de barrido de a<0>/log<2>octavas por segundo [oct/s]. Las señales vocales exhiben deformaciones de hasta 10 oct/s y una deformación media de alrededor de 2 oct/s.
Como la longitud de trama típica (longitud de bloque) de los codificadores por transformada es tan grande, tanto que el cambio de tono relativo es significativo dentro de la trama, las deformaciones o variaciones de tono de ese tamaño conducen a una codificación del análisis de frecuencia de esos codificadores. Como, para una tasa de bits constante requerida, esto solo puede superarse aumentando la tosquedad de la cuantificación, este efecto conduce a la introducción de ruido de cuantificación, que a menudo se percibe como reverberación.
Una técnica posible para superar este problema es la deformación temporal. El concepto de codificación deformada temporal se explica mejor imaginando una grabadora de cinta con velocidad variable. Al grabar la señal de audio, la velocidad se ajusta dinámicamente para lograr un tono constante en todos los segmentos sonoros. La señal de audio localmente estacionaria resultante se codifica junto con los cambios de velocidad de la cinta aplicados. En el descodificador, la reproducción se realiza con los cambios de velocidad opuestos. Sin embargo, la aplicación de la deformación temporal simple como se describe anteriormente tiene algunos inconvenientes importantes. En primer lugar, la velocidad absoluta de la cinta termina siendo incontrolable, lo que conduce a una violación de la duración de toda la señal codificada y a limitaciones de ancho de banda. Para la reconstrucción, se debe transmitir información lateral adicional sobre la velocidad de la cinta (o equivalentemente sobre el tono de la señal), introduciendo una sobrecarga sustancial de velocidad de bits, especialmente a velocidades de bits bajas.
El enfoque común de los métodos de la técnica anterior para superar el problema de la duración incontrolable de las señales deformadas temporales es procesar segmentos consecutivos no superpuestos, es decir, tramas individuales, de la señal de forma independiente mediante una deformación temporal, de modo que se preserve la duración de cada segmento. Este enfoque se describe, por ejemplo, en Yang et. Alabama. "Pitch synchronous modulated lapped transform of the linear prediction residual of speech", actas de ICSP '98, páginas 591-594. Una gran desventaja de tal procedimiento es que aunque la señal procesada es estacionaria dentro de los segmentos, el tono exhibirá saltos en cada límite de segmento. Esos saltos conducirán evidentemente a una pérdida de eficiencia de codificación del codificador de audio subsiguiente y se introducirán discontinuidades audibles en la señal descodificada.
La deformación temporal también se implementa en varios otros esquemas de codificación. Por ejemplo, el documento US-2002/0120445 describe un esquema en el que los segmentos de señal están sujetos a ligeras modificaciones en la duración antes de la codificación de la transformada basada en bloques. Esto es para evitar grandes componentes de señal en el límite de los bloques, aceptando ligeras variaciones en la duración de los segmentos individuales.
Otra técnica que hace uso de la deformación temporal se describe en el documento US-6.169.970, donde la deformación temporal se aplica con el fin de elevar el rendimiento del pronosticador a largo plazo de un codificador vocal. A lo largo de las mismas líneas, en el documento US 2005/0131681, se describe una unidad de preprocesamiento para la codificación CELP de señales vocales que aplica una deformación lineal por partes entre intervalos no superpuestos, conteniendo cada uno de los cuales un impulso de tono blanqueado. Finalmente, se describe en (R.J. Sluijter y A.J.E.M. Janssen, "A time warper for speech signals", actas IEEE sobre Speech Coding'99, junio de 1999, páginas 150-152) cómo mejorar en la estimación del tono vocal mediante la aplicación de una función de deformación cuadrática de tiempo a una trama vocal. Resumiendo, las técnicas de deformación según la técnica anterior comparten el problema de introducir discontinuidades en los bordes de la trama y de requerir una cantidad significativa de velocidad de bits adicional para la transmisión de los parámetros que describen la variación del tono de la señal.
Sumario de la invención
El objeto de esta invención es proporcionar un concepto para una codificación más eficiente de señales de audio usando la deformación temporal.
De acuerdo con un primer aspecto de la presente invención, este objeto se logra mediante un codificador de acuerdo con la reivindicación 1.
De acuerdo con un segundo aspecto de la presente invención, este objeto se logra mediante un descodificador de acuerdo con la reivindicación 4.
De acuerdo con un tercer aspecto de la presente invención, este objeto se logra mediante el método de derivación de una representación de una señal de audio de acuerdo con la reivindicación 7.
De acuerdo con un cuarto aspecto de la presente invención, este objeto se logra mediante un método de reconstrucción de una señal de audio de acuerdo con la reivindicación 10.
De acuerdo con un quinto aspecto de la presente invención, esto se logra mediante un programa de ordenador de acuerdo con la reivindicación 13.
Realizaciones preferidas se definen mediante las reivindicaciones dependientes.
La presente invención se basa en el hallazgo de que una representación espectral de una señal de audio, que tiene tramas de audio consecutivas, se puede derivar de manera más eficiente cuando se estima una deformación temporal común para cualesquiera dos tramas vecinas, de modo que una siguiente transformada en bloque pueda utilizar adicionalmente la información deformada.
De este modo, las funciones de ventana necesarias para la aplicación satisfactoria de un procedimiento de superposición y adición durante la reconstrucción se pueden derivar y aplicar, ya anticipando el remuestreo de la señal debido a la deformación temporal. Por lo tanto, la elevada eficiencia de la codificación por transformada basada en bloques de señales deformadas temporales se puede utilizar sin introducir discontinuidades audibles.
La presente invención ofrece así una solución atractiva a los problemas de la técnica anterior. Por un lado, el problema relacionado con la segmentación de la señal de audio se supera mediante una técnica particular de superposición y adición, que integra las operaciones de deformación temporal con la creación de ventanas e introduce un desplazamiento temporal de la transformada en bloque. Las transformadas continuas en el tiempo resultantes tienen una capacidad de reconstrucción perfecta y sus contrapartes discretas temporales sólo están limitadas por la calidad de la técnica de remuestreo aplicada del descodificador durante la reconstrucción. Esta propiedad da como resultado una convergencia de alta velocidad de bits del esquema de codificación de audio resultante. Es principalmente posible lograr una transmisión sin pérdidas de la señal disminuyendo la tosquedad de la cuantificación, es decir, aumentando la velocidad de transmisión de bits. Esto no se puede lograr, por ejemplo, con métodos de codificación puramente paramétricos.
Una ventaja adicional de la presente invención es una fuerte disminución de la demanda de velocidad de bits de la información adicional requerida para ser transmitida para revertir la deformación temporal. Esto se logra transmitiendo información lateral de los parámetros de la deformación en lugar de información lateral del tono. Esto tiene la ventaja adicional de que la presente invención exhibe sólo un grado leve de dependencia de parámetros en oposición a la dependencia crítica de la detección de tono correcta para muchos métodos de codificación de audio basados en parámetros de tono. Esto se debe a que la transmisión de los parámetros de tono requiere la detección de la frecuencia fundamental de una señal localmente armónica, lo que no siempre es fácilmente factible. El esquema de la presente invención es, por tanto, muy robusto, ya que evidentemente la detección de un armónico superior no falsifica los parámetros de la deformación a transmitir, dada la definición anterior de los parámetros de la deformación.
Para resumir, una representación espectral de una señal de audio que tiene tramas de audio consecutivas puede ser derivada de manera más eficiente, cuando se estima una deformación temporal común para dos tramas vecinas, de manera que una transformada en bloque siguiente pueda utilizar adicionalmente la información de la deformación. De este modo, las funciones de ventana requeridas para la aplicación satisfactoria de un procedimiento de superposición y adición durante la reconstrucción se pueden derivar y aplicar, anticipando las funciones de ventana el remuestreo de la señal debido a la deformación temporal. Por lo tanto, la elevada eficiencia de la codificación de la transformada basada en bloques de las señales deformadas temporales se puede utilizar sin introducir discontinuidades audibles.
El término "tono" debe interpretarse en un sentido general. Este término también cubre una variación de tono en conexión con lugares relacionados con la información de la deformación. Puede haber una situación en la que la información de la deformación no dé acceso al tono absoluto, sino a la información del tono relativo o normalizado. Entonces, dada una información de la deformación, puede llegar a una descripción del tono de la señal, cuando acepta obtener una forma de curva de tono correcta sin valores en el eje y.
Breve descripción de los dibujos
Las realizaciones preferidas de la presente invención que se describen a continuación hacen referencia a los dibujos adjuntos, en los que:
la figura 1 muestra un ejemplo de mapeos de deformación de acuerdo con la invención;
las figuras 2-2b muestran la aplicación de una ventana de acuerdo con la invención dependiente de la deformación;
las figuras 3a, 3b muestran un ejemplo de remuestreo de acuerdo con la invención;
las figuras 4a, 4b muestran un ejemplo de síntesis de señal de acuerdo con la invención en el lado del descodificador;
las figuras 5a, 5b muestran un ejemplo de creación de ventanas de acuerdo con la invención en el lado del descodificador;
las figuras 6a, 6b muestran un ejemplo de deformación temporal de acuerdo con la invención en el lado del descodificador;
la figura 7 muestra un ejemplo de un procedimiento de acuerdo con la invención de superposición y adición en el lado del descodificador;
la figura 8 muestra un ejemplo de un codificador de audio de acuerdo con la invención;
la figura 9 muestra un ejemplo de un descodificador de audio de acuerdo con la invención;
la figura 10 muestra un ejemplo adicional de un descodificador de acuerdo con la invención;
la figura 11 muestra un ejemplo de una implementación compatible con versiones anteriores de los conceptos de la invención;
la figura 12 muestra un diagrama de bloques de una implementación de la codificación de acuerdo con la invención; la figura 13 muestra un diagrama de bloques para un ejemplo de descodificación de acuerdo con la invención; la figura 14 muestra un diagrama de bloques de una realización adicional de descodificación de acuerdo con la invención;
las figuras 15a, 15b muestran una ilustración de la eficiencia de codificación alcanzable implementando el concepto de acuerdo con la invención.
Descripción detallada de realizaciones preferidas
Las realizaciones descritas a continuación son meramente ilustrativas de los principios de la presente invención para la codificación de señales de audio por transformada deformada temporal. Se entiende que las modificaciones y variaciones de las disposiciones y los detalles descritos en este documento serán evidentes para los expertos en la técnica. Por lo tanto, la intención es que esté limitada únicamente por el alcance de las reivindicaciones de patente más adelante y no por los detalles específicos presentados a modo de descripción y explicación de las realizaciones en este documento.
A continuación, se revisan brevemente las ideas y conceptos básicos de deformación y transformadas en bloques para determinar el concepto de acuerdo con la invención, que se describirá con más detalle a continuación, haciendo referencia a las figuras adjuntas.
En general, los detalles de la transformada deformada temporal son más fáciles de derivar en el dominio de las señales continuas en el tiempo. Los siguientes párrafos describen la teoría general, que luego se especializan y convierten a su aplicación de acuerdo con la invención en señales temporales discretas. La etapa principal en esta conversión es reemplazar el cambio de coordenadas realizado en señales continuas en el tiempo con un remuestreo no uniforme de señales discretas en el tiempo, de tal manera que se preserva la densidad media de la muestra, es decir, que la duración de la señal de audio no se altere.
s = y(t) describe un cambio temporal de coordenadas por una función creciente estrictamente diferencial continua y, mapeando el intervalo I en el eje t sobre el intervalo J en el eje s.
y(t) es, por tanto, una función que se puede utilizar para transformar el eje tiempo de una cantidad dependiente del tiempo, que es equivalente a un remuestreo en el caso discreto en el tiempo. Cabe señalar que en la siguiente descripción, el intervalo I en el eje t es un intervalo en el dominio normal en el tiempo y el intervalo J en el eje x es un intervalo en el dominio de tiempo deformado.
Dada una base ortonormal {va} para señales de energía finita en el intervalo J, se obtiene una base ortonormal {ua} para señales de energía finita en el intervalo I por la regla
Dado un intervalo de tiempo infinito I, la especificación local de la deformación temporal se puede lograr segmentando I y luego construyendo y, pegando piezas re escaladas de mapeos deformados normalizados.
Un mapeo deformado normalizado es una función continuamente diferenciable y estrictamente creciente que mapea el intervalo unitario [0,1] sobre sí mismo. Partiendo de una secuencia de puntos de segmentación t = tk donde tk+<1>>tk, y de una secuencia correspondiente de mapeos de deformación normalizados yk, se construye
donde dk = sk<+1>- sk y la secuencia dk se ajusta de manera que y(t) se hace continuamente diferenciable. Esto define y(t) a partir de la secuencia de mapeos deformados normalizados yk, hasta un cambio afín de escala del tipo Ay(t) B.
Sea {vk,n} una base ortonormal para señales de energía finita en el intervalo J, adaptada a la segmentación sk = y(tk) en el sentido de que hay un entero K, el factor de superposición, tal que vk,n (s) = 0 si s<sk o s>sk+K
La presente invención se centra en los casos K > 2, ya que el caso K = 1 corresponde a los métodos según la técnica anterior sin superposición. Cabe señalar que actualmente no se conocen muchas construcciones para K > 3. Se desarrollará un ejemplo particular para el concepto de acuerdo con la invención para el caso K = 2 a continuación, incluidas las bases trigonométricas locales que también se utilizan en transformadas discretas del coseno modificadas (MDCT) y otras transformadas discretas de lapso de tiempo.
Sea la construcción {vk,n} a partir de la segmentación local, en el sentido de que existe un entero p, tal que vk,n(s) no depende de S<i>para l<k-p l>k+K+p. Finalmente, sea la construcción tal que un cambio afín de segmentación a Ask B dé lugar a un cambio de base A-1/2vk,n((s - B) / A). Entonces
es una base ortonormal deformada temporal para señales de energía finita en el intervalo I, que está bien definida a partir de los puntos de segmentación tk y la secuencia de mapeos deformados normalizados yk, independiente de la inicialización de las secuencias de los parámetros sk y dk en (2). Se adapta a la segmentación dada en el sentido de que uk,n (t) = 0 si t<tk o t>tk+K, y se define localmente en el sentido de que uk,n (t) no depende de tt para l<k-p o l>k+K+p, ni de los mapeos deformados normalizados yi para l<k-p o l>k+K+p.
Las formas de onda de síntesis (3) son continuas, pero no necesariamente diferenciables, debido al factor Jacobiano (y'(t))1/2 Por esta razón, y para la reducción de la carga computacional en el caso discreto en el tiempo, también se puede construir un sistema biortogonal derivado. Supóngase que existen constantes 0 < C<1>< C<2>tal que
C\>]k < i f / ’( t ) < C 2T]k, tk < t < t ^ K(4)
para una secuencia nk > 0. Entonces
define un par biortogonal si de bases de Riesz para el espacio de señales de energía finita en el intervalo /.
De este modo, fk,n(t) así como gk,n(t) pueden usarse para el análisis, mientras que es particularmente ventajoso usar fk,n(t) como formas de onda de síntesis y gk,n(t) como formas de onda de análisis.
Basándose en las consideraciones generales anteriores, un ejemplo del concepto de acuerdo con la invención se derivará en los párrafos siguientes para el caso de segmentación uniforme tk = k y factor de superposición K = 2, utilizando una base local del coseno adaptada a la segmentación resultante en el eje s.
Cabe señalar que las modificaciones necesarias para tratar las segmentaciones no uniformes son obvias de modo que el concepto de acuerdo con la invención también es aplicable a tales segmentaciones no uniformes. En cuanto al ejemplo propuesto por M.W. Wickerhauser, "Adapted wavelet análisis from theory to software", A. K. Peters, 1994, Capítulo 4, un punto de partida para construir una base local del coseno es una función de corte ascendente p tal que p(r) = 0 para r < - 1, p(r) = 1 para r > 1, y p(r)2 p(-r)2 = 1 en la región activa -1 < r < 1.
Dada una segmentación sk, se puede construir una ventana en cada intervalo sk < s < sk<+2>de acuerdo con
con puntos medios de corte ck = (sk sk<+1>) / 2 y radios de corte gk = (sk<+1>- sk) / 2. Esto corresponde a la construcción del punto medio de Wickerhauser.
Con lk = Ck+i - Ck = sk sk+i, resulta una base ortonormal a partir de
donde el índice de frecuencia n = 0,1, 2, ... Es fácil verificar que esta construcción obedece a las condiciones de localidad con p = 0 e invariancia afín descrita anteriormente. La base deformada resultante (3) en el eje t puede en este caso reescribirse en la forma
para k < t < k 2, donde ^k se define pegando yk e yk<+1>para formar un mapeo continuamente diferenciable del intervalo [0,2] sobre sí mismo,
2m kY k ( 0 ,<0 < ¿ < 1; j>
M )2(1 -mk) i¡/k+i ( t - ] ) 2mk, \< t< 2 . ¡<(9)>
Esto se obtiene poniendo
La construcción de yk se ilustra en la figura 1, mostrando el tiempo normalizado en el eje x y el tiempo deformado en el eje y. La figura 1 se describirá particularmente para el caso k = 0, es decir, para construir<^ 0>(t) y por lo tanto, para derivar una función de deformación para una primera trama 10, que dura desde el tiempo normalizado 0 hasta el tiempo normalizado 1 y para una segunda trama 12 que dura desde el tiempo normalizado 1 hasta el tiempo normalizado 2. Se supone además que la primera trama 10 tiene una función de deformación 14 y que la segunda trama 12 tiene una función de deformación 16, derivada con el objetivo de lograr un tono igual dentro de las tramas individuales, cuando el eje de tiempo se transforma como lo indican las funciones de deformación 14 y 16. Cabe señalar que la función de deformación 14 corresponde a y<0>□ y la función de deformación 16 corresponde a y<1>. De acuerdo con la ecuación 9, se construye una función de deformación combinada ^<0>(t) 18 pegando los mapeos de deformación 14 y 16 para formar un mapeo continuamente diferenciable del intervalo [0,2] sobre sí mismo. Como resultado, el punto (1,1) se transforma en (1, a), donde a, corresponde a 2mk en la ecuación 9.
Dado que el concepto de acuerdo con la invención está dirigido a la aplicación de la deformación temporal en un escenario de superposición y adición, el ejemplo de construcción de la siguiente función de deformación combinada para la trama 12 y para la siguiente trama 20 también se muestra en la figura 1. Cabe señalar que, siguiendo el principio de superposición y adición, para una reconstrucción de la trama 12, se requiere el conocimiento de ambas funciones de deformación 18 y 22.
Cabe señalar además que pegar dos funciones de deformación derivadas independientemente no es necesariamente la única forma de derivar una función combinada de deformación adecuada ^ (18 , 22) ya que ^ puede muy bien derivarse también directamente fijando una función de deformación adecuada a dos tramas consecutivas. Se prefiere tener una consistencia afín de las dos funciones de deformación en la superposición de sus dominios de definición.
De acuerdo con la ecuación 6, la función de ventana en la ecuación 8 viene definida por
que aumenta de cero a uno en el intervalo [0, 2mk] y disminuye de uno a cero en el intervalo [2mk, 2].
También se puede derivar una versión biortogonal de (8) si existen constantes 0 < Ci < C<2>, tales que
para todos los k. Elegir nk = lk en (4) conduce a la especialización de (5) a
De este modo, para el caso de tiempo continuo, se derivan las funciones de síntesis y análisis (ecuación 12), que dependen de la función deformada combinada. Esta dependencia permite deformar el tiempo dentro de un escenario de superposición y adición sin pérdida de información sobre la señal original, es decir, permitiendo una reconstrucción perfecta de la señal.
Puede observarse que, para propósitos de implementación, las operaciones realizadas dentro de la ecuación 12 pueden descomponerse en una secuencia de etapas de proceso individuales consecutivas. Una forma particularmente atractiva de hacerlo es realizar primero una ventana de la señal, seguida de un remuestreo de la señal de ventana y finalmente una transformada.
Como es habitual, las señales de audio se almacenan y transmiten digitalmente como valores de muestreo discretos muestreados con una frecuencia de muestreo dada, el ejemplo dado para la implementación del concepto de acuerdo con la invención se desarrollará a continuación para la aplicación en el caso discreto.
La transformada discreta del coseno modificada deformada temporal (TWMDCT) se puede obtener a partir de una base del coseno local deformada temporal mediante la discretización de integrales de análisis y formas de onda de síntesis. La siguiente descripción se basa en la base biortogonal (véase ecuación 12). Los cambios necesarios para tratar el caso ortogonal (8) consisten en una ponderación adicional en el dominio en el tiempo por el factor Jacobiano En el caso especial en el que no se aplique la deformación, ambas construcciones se reducen a la MDCT ordinaria. Sea L el tamaño de la transformada y supóngase que la señal x(t) a analizar tiene una banda limitada por qnL (rad/s) para algunas q < 1. Esto permite que la señal sea descrita por sus muestras en el período de muestreo 1 / L.
Los coeficientes de análisis vienen dados por
Definir la porción de señal en ventana xk(t) = x ( i k) bk (^ (<t>)) y realizar las sustituciones i= t-k y r=^k(t) en la integral (13) conduce a
Una forma particularmente atractiva de discretizar esta integral enseñada por la presente invención es elegirlos puntos de muestreo r = rv = mk (v ^ ) / L, donde v es un valor entero. Suponiendo una deformación leve y la limitación de banda descrita anteriormente, esto da la aproximación
donde
El intervalo de suma en (15) está definido por 0 < rv < 2. Incluye v = 0, 1, L-1 y se extiende más allá de este intervalo en cada extremo, de manera que el número total de puntos sea 2L. Téngase en cuenta que debido a las ventanas, el resultado es insensible al tratamiento de los casos extremos, lo que puede ocurrir si mk = (vo 1^ ) / L para algún entero vo.
Como es bien sabido que la suma (ecuación 15) se puede calcular mediante operaciones de plegado elementales seguida por un DCT de tipo IV, puede ser apropiado descomponer las operaciones de la ecuación 15 en una serie de operaciones y transformadas posteriores para hacer uso de implementaciones de hardware y software eficientes ya existentes, particularmente de DCT (transformada discreta del coseno). De acuerdo con la integral discretizada, una señal de tiempo discreta dada se puede interpretar como las muestras equidistantes en períodos de muestreo 1/L de x(t). Un primer paso de la creación de las ventanas conduciría así a:
para p = 0, 1, 2, ..., 2L-1. Antes de la transformada en bloque como se describe en la ecuación 15 (introduciendo un desplazamiento adicional dependiendo de mk), se requiere un remuestreo, mapeo
La operación de remuestreo se puede realizar por cualquier método de remuestreo no equidistante.
Resumiendo, el MDCD deformado temporal de acuerdo con la invención puede descomponerse en una operación de ventanas, un remuestreo y una transformada en bloque.
A continuación, se describirán brevemente las etapas individuales haciendo referencia a las figuras 2 a 3b. Las figuras 2 a 3b muestran las etapas de la codificación MDCT deformada temporal considerando solo dos bloques de señal en ventana de una señal de tono generada sintéticamente. Cada trama individual comprende 1024 muestras de modo que cada una de las dos tramas combinadas consideradas 24 y 26 (tramas originales 30 y 32 y tramas originales 32 y 34) consta de 2048 muestras, de modo que las dos tramas combinadas en ventana tienen una superposición de 1024 muestras. Las figuras 2 a 2b muestran en el eje x el tiempo normalizado de 3 tramas a procesar. El rango de las primeras 30 tramas va de 0 a 1, el rango de la segunda trama 32 va de 1 a 2 y el rango de las 3 tramas va de 2 a 3 en el eje del tiempo. De este modo, en el dominio de tiempo normalizado, cada unidad de tiempo corresponde a una trama completa que tiene 1024 muestras de la señal. Las ventanas de análisis normalizado abarcan los intervalos de tiempo normalizados [0,2] y [1,3]. El objetivo de las siguientes consideraciones es recuperar la trama intermedia 32 de la señal. Como la reconstrucción de las tramas externas de la señal (30, 34) requiere datos de segmentos de señal de ventana contigua, esta reconstrucción no debe considerarse aquí. Puede observarse que los mapeos de deformación combinados mostrados en la figura 1 son mapeos de deformación derivados de la señal de la figura 2, que ilustran la combinación de acuerdo con la invención de tres mapeos de deformación normalizados subsiguientes (curvas de puntos) en dos mapeos de deformación superpuestos (curvas sólidas). Como se explicó anteriormente, los mapeos de deformación combinados de acuerdo con la invención 18 y 22 se derivan para el análisis de señales. Además, cabe señalar que debido a la invariancia afín de la deformación, esta curva representa un mapeo deformado con la misma deformación que en los dos segmentos originales.
La figura 2 ilustra la señal original mediante un gráfico sólido. Su tren de impulso estilizado tiene un tono que crece linealmente con el tiempo, por lo tanto, tiene una deformación positiva y decreciente considerando que la deformación se define como la derivada logarítmica del tono. En la figura 2, las ventanas de análisis de acuerdo con la invención como derivadas usando la ecuación 17 se superponen como curvas de puntos. Cabe señalar que la desviación de las ventanas simétricas normalizadas (como por ejemplo en MDCT) es mayor donde la deformación es mayor, es decir, en el primer segmento [0,1]. La definición matemática de las ventanas solo se da volviendo a muestrear las ventanas de la ecuación 11, el remuestreo implementado como se expresa por el segundo factor del lado derecho de la ecuación 17.
Las figuras 2a y 2b ilustran el resultado del sistema de ventanas de acuerdo con la invención, aplicando las ventanas de la figura 2 a los segmentos de señal individuales.
Las figuras 3a y 3b ilustran el resultado del remuestreo dependiente de los parámetros de la deformación de los bloques de señal de ventana de las figuras 2a y 2b, el remuestreo realizado como lo indican los mapeos de deformación dados por las curvas sólidas de la figura 1. El intervalo de tiempo normalizado [0,1] se asigna al intervalo de tiempo deformado [0, a], que es equivalente a una compresión de la mitad izquierda del bloque de señal con ventana. En consecuencia, se realiza una expansión de la mitad derecha del bloque de señal con ventana, mapeando el interno [1,2] a [a,2]. Dado que el mapeo de deformación se deriva de la señal con el objetivo de derivar la señal deformada con tono constante, el resultado de la deformación (remuestreo de acuerdo con la ecuación 18) es un bloque de señal con ventana que tiene un tono constante. Cabe señalar que un desajuste entre el mapeo deformado y la señal conduciría a un bloque de señal con un tono aún variable en este punto, lo que no perturbaría la reconstrucción final.
El desplazamiento de la siguiente transformada en bloque está marcado por círculos de modo que el intervalo [m, m+1] corresponde a las muestras discretas v = 1, 0, ..., L-1 con L = 1024 en la fórmula 15. Esto significa de manera equivalente que las formas de onda moduladoras de la transformada en bloque comparten un punto de simetría par en m y un punto de simetría impar en m 1. Además, es importante tener en cuenta que a es igual a 2m, de modo que m es el punto medio entre 0 y a y m 1 es el punto medio entre a y 2. Resumiendo, las figuras 3a y 3b describen la situación después del remuestreo de acuerdo con la invención descrito por la ecuación 18 que, por supuesto, depende de los parámetros de la deformación.
Las muestras en el dominio de la transformada deformada temporal de las señales de las figuras 3a y 3b se cuantifican y codifican entonces y pueden transmitirse junto con la información del lado de deformación que describe mapeos de deformación normalizados a un descodificador. Como la cuantificación es una técnica comúnmente conocida, la cuantificación que utiliza una regla de cuantificación específica no se ilustra en las siguientes figuras, centrándose en la reconstrucción de la señal en el lado del descodificador.
En una realización de la presente invención, el descodificador recibe la secuencia del mapeo de deformación junto con las muestras en el dominio de transformada deformada temporal descodificadas dk,n, donde puede suponerse que dk,n = 0 para n > L debido a la limitación de banda supuesta de la señal. Al igual que en el lado del codificador, el punto de partida para lograr la síntesis de tiempo discreto será considerar la reconstrucción de tiempo continuo utilizando la síntesis de formas de onda de la ecuación 12:
y U ) ^ d , , „ f , A t > = ' Z y Á < - k )o ? )
n,k k
donde
yAu) = zk{(f,Áu))(2°)
y con
La ecuación (19) es el procedimiento usual de superposición y adición de una síntesis de transformada en ventana. Como en la etapa de análisis, es ventajoso muestrear la ecuación (21) en los puntos r = rv = mk (v 1^ ) / L, dando lugar a
que se calcula fácilmente mediante las siguientes etapas: Primero, una DCT de tipo IV seguido de una extensión en 2L en muestras según el parámetro de desplazamiento mk de acuerdo con la regla 0 < rv < 2. A continuación, se realiza la creación de ventanas con la ventana bk(rv). Una vez que se encuentra zk(rv), el remuestreo
da el segmento de señal yk en puntos de muestra equidistantes (p 1/2) / L listo para la operación de superposición y adición descrita en la fórmula (19).
El método de remuestreo se puede volver a ser elegido con bastante libertad y no tiene que ser el mismo que en el codificador. En una realización de la presente invención, se utilizan métodos basados en interpolación de ranura, donde el orden de las funciones de ranura se puede ajustar como una función de un parámetro de limitación de banda q para lograr un compromiso entre la complejidad computacional y la calidad de la reconstrucción. Un valor común del parámetro q es q = 1/3, un caso en el que las ranuras cuadráticas suelen ser suficientes.
La descodificación se ilustrará a continuación mediante las figuras 4a a 7 para la señal mostrada en las figuras 3a y 3b. Se enfatizará nuevamente que la transformada en bloque y la transmisión de los parámetros de la transformada no se describen en este documento, ya que es una técnica comúnmente conocida. Como comienzo para el proceso de descodificación, las figuras 4a y 4b muestran una configuración, en la que ya se ha realizado la transformada en bloque inversa, dando como resultado las señales mostradas en las figuras 4a y 4b. Una característica importante de la transformada en bloque inversa es la adición de componentes de señal que no están presentes en la señal original de las figuras 3a y 3b, lo que se debe a las propiedades de simetría de las funciones de síntesis ya explicadas anteriormente. En particular, la función de síntesis tiene simetría par con respecto a m y simetría impar con respecto a m 1. Por lo tanto, en el intervalo [0,a], se añaden componentes de señal positiva en la transformada en bloque inversa, mientras que en el intervalo [a,2], se añaden componentes de señal negativos. Adicionalmente, la función de ventana de acuerdo con la invención utilizada para la operación de ventana de síntesis se superpone como una curva de puntos en las figuras 4a y 4b.
La definición matemática de esta ventana de síntesis en el dominio en el tiempo deformado viene dada por la ecuación 11. Las figuras 5a y 5b muestran la señal, todavía en el dominio en el tiempo deformado, después de la aplicación del sistema de ventanas de acuerdo con la invención.
Las figuras 6a y 6b finalmente muestran el resultado del remuestreo dependiente del parámetro de la deformación de las señales de las figuras 5a y 5b.
Finalmente, la figura 7 muestra el resultado de la operación de superposición y adición, siendo la etapa final en la síntesis de la señal (véase la ecuación 19). La operación de superposición y adición es una superposición de las formas de onda de las figuras 6a y 6b. Como ya se mencionó anteriormente, la única trama que se reconstruirá completamente es la trama intermedia 32 y, una comparación con la situación original de la figura 2 muestra que la trama intermedia 32 se reconstruye con alta fidelidad. La cancelación precisa de los componentes perturbadores de la señal de adición introducidos durante la transformada en bloque inverso solo es posible ya que es una propiedad crucial de la presente invención que los dos mapeos combinados 14 y 22 en la figura 1 difieran solo por un mapeo afín dentro del intervalo de tiempo normalizado superpuesto [1,2]. Una consecuencia de esto es que existe una correspondencia entre las porciones de señal y las ventanas en los segmentos de tiempo deformados [a,2] y [1,b]. Al considerar las figuras 4a y 4b, un estiramiento lineal de los segmentos [1,b] en [a,2] hará, por tanto, que los gráficos de señal y las mitades de ventana describan el conocido principio de cancelación por alias en el dominio en el tiempo de la MDCT normalizada. La señal, que ya ha sido cancelada por alias, puede entonces simplemente mapearse en el intervalo de tiempo normalizado [1,2] por un mapeo de deformación inverso común.
Cabe señalar que, de acuerdo con una realización adicional de la presente invención, la reducción adicional de la complejidad computacional se puede lograr mediante la aplicación de una etapa de filtrado previo en el dominio en frecuencia. Esto se puede implementar mediante una simple ponderación previa de los valores de muestra transmitidos dkn. Un filtrado previo de este tipo se describe, por ejemplo, en M. Unser, A. Aldroubi y M. Eden, "B-spline signal processing part II-efficient design and applications". Una implementación requiere que se aplique un remuestreo B-ligero a la salida de la transformada en bloque inversa antes de la operación de ventana. Dentro de esta realización, el remuestreo opera sobre una señal derivada de la ecuación 22 que tiene dk,n modificado. La aplicación de la función de ventana bk(rv) tampoco se realiza. Por lo tanto, en cada extremo del segmento de la señal, el remuestreo debe tener en cuenta las condiciones límite en términos de periodicidades y simetrías inducidas por la elección de la transformada en bloque. La ventana requerida se realiza luego del remuestreo usando la ventana bk(<k((p 1^ ) / L)).
Resumiendo, de acuerdo con una primera realización de un descodificador de acuerdo con la invención, la MDCT deformada temporal inversa comprende, cuando se descompone en etapas individuales:
• Transformada inversa
• Ventanas
• Remuestreo
• Superposición y adición.
De acuerdo con una segunda realización de la presente invención, la MDCT deformada temporal inversa comprende:
• Ponderación espectral
• Transformada inversa
• Remuestreo
• Ventanas
• Superposición y adición.
Puede observarse que en un caso en el que no se aplique la deformación, que es el caso en el que todos los mapeos de deformación normalizados son triviales, (^k(t) = t), la realización de la presente invención como se detalló anteriormente coincide exactamente con la MDCT habitual.
Se describirán ahora realizaciones adicionales de la presente invención que incorporan las características mencionadas anteriormente haciendo referencia a las figuras 8 a 15.
La figura 8 muestra un ejemplo de un codificador de audio de acuerdo con la invención que recibe una señal digital de audio 100 como entrada y genera un flujo de bits para ser transmitido a un descodificador que incorpora el concepto de codificación de transformada deformada temporal de acuerdo con la invención. La señal de entrada digital de audio 100 puede ser una señal de audio natural o una señal de audio preprocesada, donde, por ejemplo, el preprocesamiento podría ser una operación de blanqueo para blanquear el espectro de la señal de entrada. El codificador de acuerdo con la invención incorpora un extractor de parámetros de la deformación 101, un transformador de la deformación 102, una calculadora del modelo perceptual 103, un codificador de la deformación 104, un codificador 105 y un multiplexor 106. El extractor 101 de los parámetros de la deformación estima una secuencia de los parámetros de la deformación, que se introduce en el transformador de la deformación 102 y en el codificador de la deformación 104. El transformador de la deformación 102 deriva una representación espectral deformada temporal de la señal de entrada de audio digital 100. La representación espectral deformada temporal se introduce en el codificador 105 para cuantificación y posiblemente otra codificación, como por ejemplo codificación diferencial. El codificador 105 es controlado adicionalmente por la calculadora del modelo perceptual 103. Tal, por ejemplo, tosquedad de la cuantificación puede incrementarse cuando se vayan a codificar los componentes de la señal que están enmascarados principalmente por otros componentes de la señal. El codificador de la deformación 104 codifica la secuencia de los parámetros de la deformación para reducir su tamaño durante la transmisión dentro del flujo de bits. Esto podría comprender, por ejemplo, la cuantificación de los parámetros o, por ejemplo, técnicas de codificación diferencial o de codificación de entropía así como esquemas de codificación aritmética.
El multiplexor 106 recibe la secuencia de los parámetros de la deformación codificada del codificador de deformación 104 y una representación espectral de deformación temporal codificada de la señal 100 de la entrada de audio digital para multiplexar ambos datos en el flujo de bits emitido por el codificador.
La figura 9 ilustra un ejemplo de un descodificador de transformada deformada temporal que recibe un flujo de bits 200 compatible para derivar una señal de audio reconstruida como salida. El descodificador comprende un desmultiplexor 201, un descodificador de la deformación 202, un descodificador 203 y un transformador de la deformación inversa 204. El desmultiplexor desmultiplexa el flujo de bits en la secuencia codificada de los parámetros de la deformación, que se introduce en el descodificador de la deformación 202. El desmultiplexor desmultiplexa además la representación codificada de la representación espectral deformada temporal de la señal de audio, que se introduce en el descodificador 203 que es el inverso del correspondiente codificador 105 del codificador de audio de la figura 8. El descodificador de la deformación 202 deriva una reconstrucción de la secuencia de los parámetros de la deformación y el descodificador 203 deriva una representación espectral deformada temporal de la señal de audio original. La representación de la secuencia de parámetros de la deformación, así como la representación espectral deformada temporal, se ingresan en el transformador de la deformación inversa 204 que deriva una señal de salida de audio digital que implementa el concepto de acuerdo con la invención de codificación por transformada superpuesta deformada temporal de las señales de audio.
La figura 10 muestra una realización adicional de un descodificador por transformada deformada temporal en la que la secuencia delos parámetros de la deformación se deriva en el propio descodificador. La realización alternativa mostrada en la figura 10 comprende un descodificador 203, un estimador de la deformación 301 y un transformador de deformación inversa 204. El descodificador 203 y el transformador de deformación inversa 204 comparten las mismas funcionalidades que los dispositivos correspondientes de la realización anterior y, por lo tanto, la descripción de estos dispositivos dentro de las diferentes realizaciones es totalmente intercambiable. El estimador de la deformación 301 deriva la deformación real de la representación espectral deformada temporal emitida por el descodificador 203 combinando las estimaciones del tono en el dominio en frecuencia anteriores con una estimación del tono en el dominio en frecuencia actual. De este modo, la secuencia de los parámetros de la deformación se señaliza implícitamente, lo que tiene la gran ventaja de que se puede ahorrar más velocidad de bits, ya que no tiene que transmitirse la información de los parámetros de la deformación adicional en la entrada del flujo de bits al descodificador. Sin embargo, la señalización implícita de los datos deformados está limitada por la resolución temporal de la transformada.
La figura 11 ilustra la compatibilidad con versiones anteriores del concepto de acuerdo con la invención, cuando los descodificadores de la técnica anterior no son capaces usar el concepto de acuerdo con la invención de descodificación deformada temporal. Tal descodificador ignoraría la información adicional de los parámetros de la deformación, descodificando así el flujo de bits en una señal de dominio en frecuencia alimentada a un transformador inverso 401 que no implementa ninguna deformación. Puesto que el análisis de frecuencia realizado por la transformada deformada temporal en codificadores de acuerdo con la invención está bien alineado con la transformada que no incluye ninguna deformación temporal, un descodificador que ignore los datos de la deformación seguirá produciendo una salida de audio significativa. Esto se hace a costa de una calidad de audio degradada debido a la deformación temporal, que no se invierte en los descodificadores según la técnica anterior.
La figura 12 muestra un diagrama de bloques del método de acuerdo con la invención de la transformada deformada temporal. La transformada deformada temporal de acuerdo con la invención comprende la creación de ventanas 501, el remuestreo 502 y una transformada en bloque 503. En primer lugar, la señal de entrada se aplica en ventanas con una secuencia de ventanas superpuestas dependiendo de la secuencia de los parámetros de la deformación que sirve como entrada adicional para cada una de las etapas de codificación individuales, 501 a 503. Cada segmento de señal de entrada en ventana se remuestrea posteriormente en la etapa de remuestreo 502, en la que el remuestreo se realiza según lo indicado por la secuencia de los parámetros de la deformación.
Dentro de la etapa de transformada en bloque 503, una transformada en bloque se deriva típicamente usando una conocida transformada trigonométrica discreta. La transformada se realiza así en el segmento de señal en ventana y remuestreada. Cabe señalar que la transformada en bloque también depende de un valor de desplazamiento, que se deriva de la secuencia de los parámetros de la deformación. De este modo, la salida consiste en una secuencia de tramas en el dominio de la transformada.
La figura 13 muestra un diagrama de flujo de un método de transformada deformada temporal inversa. El método comprende las etapas de transformada por bloque inverso 601, ventanas 602, remuestreo 603 y superposición y adición 604. Cada trama de una señal en el dominio de la transformada se convierte en una señal en el dominio en el tiempo mediante la transformada por bloque inverso 601. Correspondiente a la etapa de codificación, la transformada por bloque depende de un valor de desplazamiento derivado de la secuencia de parámetros recibidos que sirve como entrada adicional a la transformada por bloque inverso 601, ventanas 602 y el remuestreo 603. El segmento de señal derivado por la transformada por bloque 601 se sitúa posteriormente en ventana en la etapa de ventanas 602 y se remuestrea en el remuestreo 603 usando la secuencia de los parámetros de la deformación. Finalmente, al superponer y agregar 604, el segmento en ventana y remuestreado se agrega a los segmentos previamente transformados inversamente en una operación usual de superposición y adición, dando como resultado una reconstrucción de la señal de salida en el dominio en el tiempo.
La figura 14 muestra una realización alternativa de un transformador de deformación temporal inversa de acuerdo con la invención, que se implementa para reducir adicionalmente la complejidad computacional. El descodificador comparte parcialmente las mismas funcionalidades con el descodificador de la figura 13. Por lo tanto, la descripción de los mismos bloques funcionales en ambas realizaciones son completamente intercambiables. La realización alternativa difiere de la realización de la figura 13 en que implementa una ponderación previa espectral 701 antes de la transformada en bloque inverso 601. Esta ponderación previa espectral fija es equivalente a un filtrado en el dominio en el tiempo con periodicidades y simetrías inducidas por la elección de la transformada en bloque. Tal operación de filtrado es parte de ciertos métodos de remuestreo ligeros, lo que permite una reducción de la complejidad computacional del remuestreo modificado posterior 702. Tal remuestreo ahora se realizará en un dominio de señal con periodicidades y simetrías inducidas por la elección de la transformada en bloque. Por lo tanto, una etapa de creación de ventanas modificada 703 de reducción se realiza después del remuestreo 702. Finalmente, al superponer y añadir 604, el segmento dividido y vuelto a muestrear se le añade al segmento previamente transformado inverso en un procedimiento de superposición y adición habitual que da la señal de salida en el dominio en el tiempo reconstruida.
Las figuras 15a y 15b muestran la fuerza del concepto de acuerdo con la invención de codificación deformada temporal, mostrando representaciones espectrales de la misma señal con y sin deformación temporal aplicada. La figura 15a ilustra una trama de líneas espectrales que se originan a partir de una transformada discreta del coseno modificada de tamaño de la transformada 1024 de un segmento de señal vocal masculina muestreado a 16 kHz. La resolución de frecuencia resultante es de 7,8 Hz y solo las primeras 600 líneas se trazan para esta ilustración, correspondientes a un ancho de banda de 4,7 kHz. Como se puede ver de la frecuencia fundamental y del gráfico, el segmento es un sonido vocal con un tono medio de aproximadamente 155 Hz. Como puede verse además en la figura 15a, los pocos primeros armónicos de la frecuencia de tono son claramente distinguibles, pero hacia las frecuencias altas, el análisis se vuelve cada vez más denso y encriptado. Esto se debe a la variación del tono dentro de la longitud del segmento de la señal a analizar. Por lo tanto, la codificación de los rangos de frecuencia media a alta requiere una cantidad sustancial de bits para no introducir artefactos audibles durante la descodificación. Por el contrario, al fijar la velocidad de bits, inevitablemente se producirá una cantidad sustancial de distorsión debido a la demanda de aumentar la tosquedad de la cuantificación.
La figura 15b ilustra una trama de líneas espectrales que se originan a partir de una transformada discreta del coseno modificada deformada temporal de acuerdo con la presente invención. Obviamente, se ha utilizado la misma señal de audio masculina original que en la figura 15a. Los parámetros de la transformada son los mismos que para la figura 15a, pero el uso de una transformada deformada temporal adaptada a la señal tiene el efecto dramático visible sobre la representación espectral. El carácter disperso y organizado de la señal en el dominio de la transformada deformada temporal produce una codificación con un rendimiento de distorsión de la velocidad mucho mejor, incluso cuando se tiene en cuenta el coste de codificar los datos deformados adicionales.
Como ya se mencionó, la transmisión de los parámetros de la deformación en lugar de la transmisión de la información del tono o velocidad tiene la gran ventaja de reducir drásticamente la velocidad de bits adicional requerida. Por consiguiente, en los siguientes párrafos, se detallan diversos esquemas de acuerdo con la invención de transmisión de la información de los parámetros de deformación requeridos.
Para una señal con deformación a(t) en un tiempo t, la elección óptima de la secuencia de mapeo deformada normalizada yk para las bases del coseno local (véase (8), (12)) se obtiene resolviendo
<K ( ' ~ f r ) = a ( ,)>k < t < k<1 (24)>
W'Át-k)<v>
Sin embargo, la cantidad de información requerida para describir esta secuencia de mapeo deformada es demasiado grande y es difícil la definición y medición de los valores puntuales de a(t). Para fines prácticos, un intervalo de actualización deformado At se establece sobre ello y cada mapeo deformado yk se describe mediante los parámetros N = 1 / At.
Un intervalo de actualización deformado de alrededor de 10-20 ms suele ser suficiente para las señales vocales. De manera similar a la construcción en (9) de ^k de yk y yk<+1>, un mapeo deformado normalizado continuamente diferenciable puede ser reconstruido por N mapeos deformados normalizados por medio de operaciones de ajuste de re escalado afines adecuadas. Ejemplos de prototipos de mapeos deformados normalizados incluyen
donde a es un parámetro deformado. Al definir la deformación de un mapeo h(t) por h"/h', los tres mapeos logran una deformación igual a a en t = 1/2. El mapeo exponencial tiene una deformación constante en todo el intervalo 0 < t < 1, y para valores pequeños de a, los otros dos mapeos muestran una desviación muy pequeña de este valor constante. Para un mapeo deformado dado aplicado en el descodificador para el remuestreo (23), se requiere su inverso en el codificador para el remuestreo (ecuación 18). Una parte principal del esfuerzo de inversión se origina en la inversión de los mapeos deformados normalizados. La inversión de un mapeo cuadrático requiere operaciones de raíz cuadrada, la inversión de un mapeo exponencial requiere un logaritmo y la inversa del mapeo racional de Moebius es un mapeo de Moebius con parámetro deformado negado. Dado que las funciones exponenciales y las divisiones son comparativamente caras, un enfoque en la máxima facilidad computacional en el descodificador conduce a la elección preferida de una secuencia de mapeo deformado cuadrática por partes yk.
El mapeo de deformación normalizado yk está completamente definido por N parámetros de la deformación ak(0), ak(1), ak(N-1) por los requisitos que
• es un mapeo deformado normalizado;
• se ensambla mediante copias re escaladas de uno de los prototipos de mapeos deformados suaves (25)
• es continuamente diferenciable
• satisface
La presente invención enseña que los parámetros pueden ser cuantificados linealmente, típicamente, a un tamaño de etapa de aproximadamente 0,5 Hz. A continuación, se codifican los valores enteros resultantes. Alternativamente, la derivada yk se puede interpretar como una curva de tono normalizada donde los valores
se cuantifican a un tamaño de etapa fijo, normalmente 0,005. En este caso, los valores enteros resultantes se codifican adicionalmente por diferencia, secuencialmente o de manera jerárquica. En ambos casos, la velocidad de bits de la información lateral resultante es típicamente de unos pocos cientos de bits por segundo, que es solo una fracción de la velocidad requerida para describir los datos del tono en un códec vocal.
Un codificador con grandes recursos computacionales puede determinar la secuencia de datos deformada que de manera óptima reduce el coste de codificación o maximiza una medida de escasez de líneas espectrales. Un procedimiento menos costoso es utilizar métodos bien conocidos para el seguimiento del tono que dan como resultado una función de tono medida p(t) y que se aproxima la curva de tono con una función lineal por partes de p<0>(t) en aquellos intervalos donde existe una pista de tono y no presenta grandes saltos en los valores del tono. La secuencia de la deformación estimada viene dada por
( l ) 2A t ( ( l l ) A * * ) - Jp 0( iA r f r )
kAt p$((l+ 1)A<í>“k)-t* p 0(/Aík)
dentro de los intervalos de seguimiento del tono. Fuera de esos intervalos, la deformación se fija a cero. Téngase en cuenta que un error sistemático en las estimaciones del tono tal como la duplicación del período del tono, tiene muy poco efecto en las estimaciones de la deformación.
Como se ilustra en la figura 10, en una realización alternativa de la presente invención, la secuencia de los parámetros de la deformación puede derivarse de los datos en el dominio de la transformada descodificados mediante un estimador de la deformación. El principio es calcular una estimación del tono en el dominio de la frecuencia para cada trama de datos de la transformada o de los tonos de los bloques de señales descodificados subsiguientes. La información de la deformación se deriva luego de una fórmula similar a la fórmula 28.
La aplicación del concepto de acuerdo con la invención se ha descrito principalmente aplicando la deformación en un escenario de un único canal de audio. Por supuesto, el concepto de acuerdo con la invención no se limita en modo alguno al uso dentro de tal escenario monofónico. Además, puede resultar extremadamente ventajoso utilizar la alta ganancia de codificación que se puede conseguir mediante el concepto de acuerdo con la invención dentro de aplicaciones de codificación multicanal, en las que el canal único o el canal múltiple que debe transmitirse puede codificarse utilizando el concepto de acuerdo con la invención. Además, la deformación podría definirse generalmente como una transformación del eje x de una función arbitraria que depende de x. Por lo tanto, el concepto de acuerdo con la invención también se puede aplicar a escenarios donde las funciones o la representación de señales están deformadas que no dependen explícitamente del tiempo. Por ejemplo, también se puede implementar la deformación de una representación de la frecuencia de una señal.
Además, el concepto de acuerdo con la invención también se puede aplicar ventajosamente a señales que están segmentadas con una longitud de segmento arbitraria y no con la misma longitud como se describe en los párrafos anteriores.
El uso de las funciones básicas y el criterio presentados en los párrafos anteriores debe entenderse además como un ejemplo ventajoso de aplicación del concepto de acuerdo con la invención. Para otras aplicaciones también se pueden utilizar diferentes funciones básicas, así como diferentes criterios.
Dependiendo de ciertos requisitos de implementación de los métodos de acuerdo con la invención, los métodos de acuerdo con la invención se pueden implementar en hardware o en software. La implantación se puede realizar utilizando un medio de almacenamiento digital, en particular un disco, DVD o CD que tenga almacenadas señales de control interpretables electrónicamente, que cooperan con un sistema de ordenador programable de manera que se lleven a cabo los métodos de acuerdo con la invención. Generalmente, la presente invención es, por tanto, un producto de programa de ordenador con un código de programa almacenado en un soporte interpretable por ordenador, siendo el código de programa operativo para realizar los métodos de acuerdo con la invención cuando el producto de programa de ordenador se ejecuta en un ordenador. En otras palabras, los métodos de acuerdo con la invención son, por lo tanto, un programa de ordenador que tiene un código de programa para realizar al menos uno de los métodos de acuerdo con la invención cuando el programa de ordenador se ejecuta en un ordenador. Si bien lo anterior se ha mostrado y descrito particularmente con referencia a realizaciones particulares de lo mismo, los expertos en la técnica entenderán que se pueden realizar diversos cambios en la forma y detalles sin apartarse del alcance de la misma. Debe entenderse que se pueden realizar diversos cambios para adaptarse a las diferentes realizaciones.
El alcance de la presente invención viene definido por las reivindicaciones adjuntas.

Claims (13)

REIVINDICACIONES
1. Codificador para derivar una representación de una señal de audio que tiene una primera trama, una segunda trama que sigue a la primera trama, y una tercera trama que sigue a la segunda trama, comprendiendo el codificador:
un estimador de deformación (101) para estimar una primera secuencia de parámetros de deformación para la primera y la segunda trama y para estimar una segunda secuencia de parámetros de deformación para la segunda trama y la tercera trama;
un analizador espectral (102) para derivar primeros coeficientes espectrales para la primera y la segunda trama usando la primera secuencia de parámetros de deformación y para derivar segundos coeficientes espectrales para la segunda y la tercera trama usando la segunda secuencia de parámetros de deformación; y
una interfaz de salida (106) para emitir la representación de la señal de audio incluyendo los primeros y los segundos coeficientes espectrales.
2. Codificador de acuerdo con la reivindicación 1, en el que la secuencia de parámetros de deformación describe una información de tono de la señal de audio.
3. Codificador de acuerdo con la reivindicación 1 o la reivindicación 2, en el que la señal de audio es una señal de audio multicanal.
4. Descodificador para reconstruir una señal de audio que tiene una primera trama, una segunda trama que sigue a la primera trama y una tercera trama que sigue a la segunda trama, usando una primera secuencia de parámetros de deformación para la primera y la segunda trama, una segunda secuencia de parámetros de deformación para la segunda y la tercera trama, primeros coeficientes espectrales para la primera y la segunda trama y segundos coeficientes espectrales para la segunda y la tercera trama, comprendiendo el descodificador:
un procesador de valor espectral (204) para derivar una primera trama combinada usando los primeros coeficientes espectrales y la primera secuencia de parámetros de deformación, teniendo la primera trama combinada información sobre la primera y sobre la segunda trama, y para derivar una segunda trama combinada usando los segundos coeficientes espectrales y la segunda secuencia de parámetros de deformación, teniendo la segunda trama combinada información sobre la segunda y la tercera trama; y
un sintetizador (604) para reconstruir la segunda trama mediante la adición de la primera trama combinada y la segunda trama combinada.
5. Descodificador de acuerdo con la reivindicación 4, en el que la primera secuencia de parámetros de deformación describe una información de tono de la señal de audio para la primera y la segunda trama y en el que la segunda secuencia de parámetros de deformación describe una información de tono de la señal de audio para la segunda y la tercera trama.
6. Descodificador de acuerdo con la reivindicación 4 o la reivindicación 5, en el que la señal de audio es una señal de audio multicanal.
7. Método de derivación de una representación de una señal de audio que tiene una primera trama, una segunda trama que sigue a la primera trama, y una tercera trama que sigue a la segunda trama, comprendiendo el método: estimar una primera secuencia de parámetros de deformación para la primera trama y la segunda trama y estimar una segunda secuencia de parámetros de deformación para la segunda trama y la tercera trama;
derivar primeros coeficientes espectrales para la primera trama y la segunda trama usando la primera secuencia de parámetros de deformación y derivar segundos coeficientes espectrales para la segunda y tercera trama usando la segunda secuencia de parámetros de deformación; y
emitir la representación de la señal de audio incluyendo los primeros y los segundos coeficientes espectrales.
8. El método de la reivindicación 7, en el que la secuencia de parámetros de deformación describe una información de tono de la señal de audio.
9. El método de acuerdo con la reivindicación 7 o la reivindicación 8, en el que la señal de audio es una señal de audio multicanal.
10. Método de reconstrucción de una señal de audio que tiene una primera trama, una segunda trama que sigue a la primera trama y una tercera trama que sigue a la segunda trama, usando una primera secuencia de parámetros de deformación para la primera y la segunda trama, una segunda secuencia de parámetros de deformación para la segunda y la tercera trama, primeros coeficientes espectrales para la primera y la segunda trama y segundos coeficientes espectrales para la segunda y la tercera trama, comprendiendo el método:
derivar una primera trama combinada usando los primeros coeficientes espectrales y la primera secuencia de parámetros de deformación, teniendo la primera trama combinada información sobre la primera y sobre la segunda trama, derivar una segunda trama combinada usando los segundos coeficientes espectrales y la segunda secuencia de parámetros de deformación, teniendo la segunda trama combinada información sobre la segunda y la tercera trama; y reconstruir la segunda trama mediante la adición de la primera trama combinada y la segunda trama combinada.
11. El método de la reivindicación 10, en el que la primera secuencia de parámetros de deformación describe una información de tono de la señal de audio para la primera y la segunda trama, y en el que la segunda secuencia de parámetros de deformación describe una información de tono de la señal de audio para la segunda y la tercera trama.
12. El método de acuerdo con la reivindicación 10 o la reivindicación 11, en el que la señal de audio es una señal de audio multicanal.
13. Programa de ordenador que tiene un código de programa adaptado para realizar, cuando se ejecuta en un ordenador, el método de una cualquiera de las reivindicaciones 7 a 12.
ES21156798T 2005-11-03 2006-10-24 Codificación por transformada modificada deformada temporal de señales de audio Active ES2967257T3 (es)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US73351205P 2005-11-03 2005-11-03
US11/464,176 US7720677B2 (en) 2005-11-03 2006-08-11 Time warped modified transform coding of audio signals

Publications (1)

Publication Number Publication Date
ES2967257T3 true ES2967257T3 (es) 2024-04-29

Family

ID=37507461

Family Applications (5)

Application Number Title Priority Date Filing Date
ES08008361.1T Active ES2604758T3 (es) 2005-11-03 2006-10-24 Codificación de señales de audio por transformada modificada deformada en el tiempo
ES17193127T Active ES2863667T3 (es) 2005-11-03 2006-10-24 Codificación por transformada modificada distorsionada temporal de señales de audio
ES06792443T Active ES2307287T3 (es) 2005-11-03 2006-10-24 Codificacion de señales de audio por transformada modificada deformada en el tiempo.
ES10183308.5T Active ES2646814T3 (es) 2005-11-03 2006-10-24 Codificación de señales de audio por transformada modificada deformada en el tiempo
ES21156798T Active ES2967257T3 (es) 2005-11-03 2006-10-24 Codificación por transformada modificada deformada temporal de señales de audio

Family Applications Before (4)

Application Number Title Priority Date Filing Date
ES08008361.1T Active ES2604758T3 (es) 2005-11-03 2006-10-24 Codificación de señales de audio por transformada modificada deformada en el tiempo
ES17193127T Active ES2863667T3 (es) 2005-11-03 2006-10-24 Codificación por transformada modificada distorsionada temporal de señales de audio
ES06792443T Active ES2307287T3 (es) 2005-11-03 2006-10-24 Codificacion de señales de audio por transformada modificada deformada en el tiempo.
ES10183308.5T Active ES2646814T3 (es) 2005-11-03 2006-10-24 Codificación de señales de audio por transformada modificada deformada en el tiempo

Country Status (14)

Country Link
US (3) US7720677B2 (es)
EP (7) EP2306455B1 (es)
JP (4) JP4927088B2 (es)
KR (1) KR100959701B1 (es)
CN (2) CN102592602B (es)
AT (1) ATE395687T1 (es)
DE (1) DE602006001194D1 (es)
DK (1) DK1807825T3 (es)
ES (5) ES2604758T3 (es)
HK (2) HK1105159A1 (es)
MY (1) MY141264A (es)
PL (1) PL1807825T3 (es)
TW (1) TWI320172B (es)
WO (1) WO2007051548A1 (es)

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7720677B2 (en) * 2005-11-03 2010-05-18 Coding Technologies Ab Time warped modified transform coding of audio signals
US7873511B2 (en) * 2006-06-30 2011-01-18 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio encoder, audio decoder and audio processor having a dynamically variable warping characteristic
US8682652B2 (en) * 2006-06-30 2014-03-25 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio encoder, audio decoder and audio processor having a dynamically variable warping characteristic
US8239190B2 (en) * 2006-08-22 2012-08-07 Qualcomm Incorporated Time-warping frames of wideband vocoder
US9653088B2 (en) * 2007-06-13 2017-05-16 Qualcomm Incorporated Systems, methods, and apparatus for signal encoding using pitch-regularizing and non-pitch-regularizing coding
KR101380170B1 (ko) * 2007-08-31 2014-04-02 삼성전자주식회사 미디어 신호 인코딩/디코딩 방법 및 장치
TWI455064B (zh) * 2007-12-20 2014-10-01 Thomson Licensing 聲影文件突起映圖之決定方法和裝置
EP2077550B8 (en) * 2008-01-04 2012-03-14 Dolby International AB Audio encoder and decoder
EP2107556A1 (en) * 2008-04-04 2009-10-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Audio transform coding using pitch correction
CN102150201B (zh) 2008-07-11 2013-04-17 弗劳恩霍夫应用研究促进协会 提供时间扭曲激活信号以及使用该时间扭曲激活信号对音频信号编码
AU2013206265B2 (en) * 2008-07-11 2015-05-28 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Providing a time warp activation signal and encoding an audio signal therewith
MY154452A (en) * 2008-07-11 2015-06-15 Fraunhofer Ges Forschung An apparatus and a method for decoding an encoded audio signal
EP2144231A1 (en) * 2008-07-11 2010-01-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Low bitrate audio encoding/decoding scheme with common preprocessing
EP2211335A1 (en) 2009-01-21 2010-07-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus, method and computer program for obtaining a parameter describing a variation of a signal characteristic of a signal
EP2674943B1 (en) 2009-01-28 2015-09-02 Dolby International AB Improved harmonic transposition
BR122019023709B1 (pt) 2009-01-28 2020-10-27 Dolby International Ab sistema para gerar um sinal de áudio de saída a partir de um sinal de áudio de entrada usando um fator de transposição t, método para transpor um sinal de áudio de entrada por um fator de transposição t e meio de armazenamento
KR101701759B1 (ko) 2009-09-18 2017-02-03 돌비 인터네셔널 에이비 입력 신호를 전위시키기 위한 시스템 및 방법, 및 상기 방법을 수행하기 위한 컴퓨터 프로그램이 기록된 컴퓨터 판독가능 저장 매체
WO2011048815A1 (ja) * 2009-10-21 2011-04-28 パナソニック株式会社 オーディオ符号化装置、復号装置、方法、回路およびプログラム
US9338523B2 (en) * 2009-12-21 2016-05-10 Echostar Technologies L.L.C. Audio splitting with codec-enforced frame sizes
CA2792500C (en) * 2010-03-10 2016-05-03 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio signal decoder, audio signal encoder, methods and computer program using a sampling rate dependent time-warp contour encoding
EP2372704A1 (en) 2010-03-11 2011-10-05 Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. Signal processor and method for processing a signal
KR101809298B1 (ko) * 2010-10-06 2017-12-14 파나소닉 주식회사 부호화 장치, 복호 장치, 부호화 방법 및 복호 방법
TWI488177B (zh) 2011-02-14 2015-06-11 Fraunhofer Ges Forschung 使用頻譜域雜訊整形之基於線性預測的編碼方案
SG192721A1 (en) * 2011-02-14 2013-09-30 Fraunhofer Ges Forschung Apparatus and method for encoding and decoding an audio signal using an aligned look-ahead portion
MX2013009304A (es) 2011-02-14 2013-10-03 Fraunhofer Ges Forschung Aparato y metodo para codificar una porcion de una señal de audio utilizando deteccion de un transiente y resultado de calidad.
ES2639646T3 (es) 2011-02-14 2017-10-27 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Codificación y decodificación de posiciones de impulso de pistas de una señal de audio
SG192745A1 (en) 2011-02-14 2013-09-30 Fraunhofer Ges Forschung Noise generation in audio codecs
ES2529025T3 (es) 2011-02-14 2015-02-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Aparato y método para procesar una señal de audio decodificada en un dominio espectral
CA2827000C (en) 2011-02-14 2016-04-05 Jeremie Lecomte Apparatus and method for error concealment in low-delay unified speech and audio coding (usac)
MY159444A (en) 2011-02-14 2017-01-13 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E V Encoding and decoding of pulse positions of tracks of an audio signal
CA2827335C (en) 2011-02-14 2016-08-30 Fraunhofer-Gesellschaft Zur Forderung Der Angewandten Forschung E.V. Audio codec using noise synthesis during inactive phases
SG185519A1 (en) * 2011-02-14 2012-12-28 Fraunhofer Ges Forschung Information signal representation using lapped transform
WO2014108393A1 (en) 2013-01-08 2014-07-17 Dolby International Ab Model based prediction in a critically sampled filterbank
CA2964362C (en) * 2013-06-21 2020-03-31 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Jitter buffer control, audio decoder, method and computer program
EP2830065A1 (en) 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for decoding an encoded audio signal using a cross-over filter around a transition frequency
EP2830055A1 (en) * 2013-07-22 2015-01-28 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Context-based entropy coding of sample values of a spectral envelope
FR3020732A1 (fr) * 2014-04-30 2015-11-06 Orange Correction de perte de trame perfectionnee avec information de voisement
EP3000110B1 (en) * 2014-07-28 2016-12-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Selection of one of a first encoding algorithm and a second encoding algorithm using harmonics reduction
EP3107096A1 (en) * 2015-06-16 2016-12-21 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Downscaled decoding
CN117238300A (zh) 2016-01-22 2023-12-15 弗劳恩霍夫应用研究促进协会 使用帧控制同步来编码或解码多声道音频信号的装置和方法
CN110998722B (zh) * 2017-07-03 2023-11-10 杜比国际公司 低复杂性密集瞬态事件检测和译码
EP3483879A1 (en) * 2017-11-10 2019-05-15 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Analysis/synthesis windowing function for modulated lapped transformation

Family Cites Families (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3519830A1 (de) * 1985-06-03 1986-12-18 Ruhrkohle Ag, 4300 Essen Verfahren zur kohlehydrierung mit integrierten raffinationsstufen
JPH01233835A (ja) * 1988-03-14 1989-09-19 Mitsubishi Electric Corp 音声時間軸圧縮符号化装置
JPH0546199A (ja) * 1991-08-21 1993-02-26 Matsushita Electric Ind Co Ltd 音声符号化装置
JPH0784597A (ja) * 1993-09-20 1995-03-31 Fujitsu Ltd 音声符号化装置および音声復号化装置
AU3690197A (en) 1996-08-02 1998-02-25 Universite De Sherbrooke Speech/audio coding with non-linear spectral-amplitude transformation
PL193723B1 (pl) * 1997-04-07 2007-03-30 Koninkl Philips Electronics Nv Sposób i urządzenie do kodowania sygnału mowy oraz sposób i urządzenie do dekodowania sygnału mowy
US6169970B1 (en) * 1998-01-08 2001-01-02 Lucent Technologies Inc. Generalized analysis-by-synthesis speech coding method and apparatus
US6182042B1 (en) * 1998-07-07 2001-01-30 Creative Technology Ltd. Sound modification employing spectral warping techniques
US6330533B2 (en) 1998-08-24 2001-12-11 Conexant Systems, Inc. Speech encoder adaptively applying pitch preprocessing with warping of target signal
US6502066B2 (en) * 1998-11-24 2002-12-31 Microsoft Corporation System for generating formant tracks by modifying formants synthesized from speech units
KR20010072035A (ko) * 1999-05-26 2001-07-31 요트.게.아. 롤페즈 오디오 신호 송신 시스템
US6782360B1 (en) * 1999-09-22 2004-08-24 Mindspeed Technologies, Inc. Gain quantization for a CELP speech coder
US6959274B1 (en) * 1999-09-22 2005-10-25 Mindspeed Technologies, Inc. Fixed rate speech compression system and method
AU2001276893A1 (en) 2000-07-13 2002-01-30 Qualcomm Incorporated Maximum distance block coding scheme
CN1408146A (zh) * 2000-11-03 2003-04-02 皇家菲利浦电子有限公司 音频信号的参数编码
EP1262952B1 (en) * 2001-05-28 2006-08-16 Texas Instruments Incorporated Programmable melody generator
US6879955B2 (en) * 2001-06-29 2005-04-12 Microsoft Corporation Signal modification based on continuous time warping for low bit rate CELP coding
US6941263B2 (en) * 2001-06-29 2005-09-06 Microsoft Corporation Frequency domain postfiltering for quality enhancement of coded speech
DE60232560D1 (de) 2001-08-31 2009-07-16 Kenwood Hachioji Kk Vorrichtung und Verfahren zur Erzeugung eines Signals mit konstanten Grundfrequenz und Vorrichtung sowie Verfahren zum Synthetisieren von Sprachsignalen unter Verwendung dieser Signals mit konstanten Grundfrequenz.
JP3994332B2 (ja) * 2001-09-27 2007-10-17 株式会社ケンウッド 音声信号圧縮装置、音声信号圧縮方法、及び、プログラム
EP1439524B1 (en) 2002-07-19 2009-04-08 NEC Corporation Audio decoding device, decoding method, and program
CN1290036C (zh) 2002-12-30 2006-12-13 国际商业机器公司 根据机器可读词典建立概念知识的计算机系统及方法
EP1604352A4 (en) * 2003-03-15 2007-12-19 Mindspeed Tech Inc SINGLE NOISE DELETION MODEL
US7587254B2 (en) * 2004-04-23 2009-09-08 Nokia Corporation Dynamic range control and equalization of digital audio using warped processing
US7433463B2 (en) 2004-08-10 2008-10-07 Clarity Technologies, Inc. Echo cancellation and noise reduction method
US7676362B2 (en) * 2004-12-31 2010-03-09 Motorola, Inc. Method and apparatus for enhancing loudness of a speech signal
US8155965B2 (en) * 2005-03-11 2012-04-10 Qualcomm Incorporated Time warping frames inside the vocoder by modifying the residual
US8355907B2 (en) * 2005-03-11 2013-01-15 Qualcomm Incorporated Method and apparatus for phase matching frames in vocoders
US7917561B2 (en) 2005-09-16 2011-03-29 Coding Technologies Ab Partially complex modulated filter bank
US7720677B2 (en) * 2005-11-03 2010-05-18 Coding Technologies Ab Time warped modified transform coding of audio signals
US7873511B2 (en) * 2006-06-30 2011-01-18 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Audio encoder, audio decoder and audio processor having a dynamically variable warping characteristic
US8010350B2 (en) * 2006-08-03 2011-08-30 Broadcom Corporation Decimated bisectional pitch refinement
DE602007004502D1 (de) * 2006-08-15 2010-03-11 Broadcom Corp Neuphasierung des status eines dekodiergerätes nach einem paketverlust
US8239190B2 (en) * 2006-08-22 2012-08-07 Qualcomm Incorporated Time-warping frames of wideband vocoder
PL2165328T3 (pl) * 2007-06-11 2018-06-29 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Kodowanie i dekodowanie sygnału audio zawierającego część impulsową i część stacjonarną
EP2077550B8 (en) * 2008-01-04 2012-03-14 Dolby International AB Audio encoder and decoder
MY154452A (en) * 2008-07-11 2015-06-15 Fraunhofer Ges Forschung An apparatus and a method for decoding an encoded audio signal
CN102150201B (zh) * 2008-07-11 2013-04-17 弗劳恩霍夫应用研究促进协会 提供时间扭曲激活信号以及使用该时间扭曲激活信号对音频信号编码
WO2011048815A1 (ja) * 2009-10-21 2011-04-28 パナソニック株式会社 オーディオ符号化装置、復号装置、方法、回路およびプログラム

Also Published As

Publication number Publication date
CN101351840B (zh) 2012-04-04
EP4290512A2 (en) 2023-12-13
JP6125324B2 (ja) 2017-05-10
EP4290513A3 (en) 2024-02-14
KR100959701B1 (ko) 2010-05-24
TW200719319A (en) 2007-05-16
MY141264A (en) 2010-04-16
PL1807825T3 (pl) 2009-01-30
JP4927088B2 (ja) 2012-05-09
EP3319086A1 (en) 2018-05-09
HK1254427A1 (zh) 2019-07-19
ES2307287T3 (es) 2008-11-16
KR20080066760A (ko) 2008-07-16
US20100204998A1 (en) 2010-08-12
US7720677B2 (en) 2010-05-18
EP2306455A1 (en) 2011-04-06
EP3319086B1 (en) 2021-02-17
ES2646814T3 (es) 2017-12-18
EP1807825B1 (en) 2008-05-14
HK1105159A1 (en) 2008-02-01
ES2863667T3 (es) 2021-10-11
EP2306455B1 (en) 2017-09-27
US20130218579A1 (en) 2013-08-22
EP3852103A1 (en) 2021-07-21
EP1807825A1 (en) 2007-07-18
ATE395687T1 (de) 2008-05-15
JP2012068660A (ja) 2012-04-05
US8412518B2 (en) 2013-04-02
EP4290512A3 (en) 2024-02-14
EP1953738A1 (en) 2008-08-06
DK1807825T3 (da) 2008-09-08
EP3852103B1 (en) 2023-11-29
JP6084595B2 (ja) 2017-02-22
EP4290513A2 (en) 2023-12-13
US20070100607A1 (en) 2007-05-03
EP1953738B1 (en) 2016-10-12
JP2013210654A (ja) 2013-10-10
TWI320172B (en) 2010-02-01
ES2604758T3 (es) 2017-03-09
US8838441B2 (en) 2014-09-16
DE602006001194D1 (de) 2008-06-26
WO2007051548A1 (en) 2007-05-10
JP2009515207A (ja) 2009-04-09
CN102592602A (zh) 2012-07-18
JP5323164B2 (ja) 2013-10-23
CN102592602B (zh) 2015-11-25
CN101351840A (zh) 2009-01-21
JP2015018274A (ja) 2015-01-29

Similar Documents

Publication Publication Date Title
ES2967257T3 (es) Codificación por transformada modificada deformada temporal de señales de audio
ES2651437T3 (es) Codificador de audio y decodificador de audio
ES2458354T3 (es) Decodificador de señales de audio, codificador de señales de audio, métodos y programa de ordenador que utiliza tasa de muestreo dependiente de la codificación del contorno de distorsión en el tiempo
ES2231090T3 (es) Codificador de audio con sub-bandas basado en la conmutacion de bloques.
ES2884133T3 (es) Conformación simultánea de ruido en el dominio del tiempo y el dominio de la frecuencia para transformaciones TDAC
ES2880252T3 (es) Predicción basada en modelo en un banco de filtros críticamente muestreados
ES2558508T3 (es) Método de codificación, codificador, método de determinación de la cantidad de una característica periódica, aparato de determinación de la cantidad de una característica periódica, programa y medio de grabación
ES2691479T3 (es) Procesador de señal y procedimiento para procesar una señal
JPH05506345A (ja) 高品質オーディオ用符号器・復号器
ES2400987T3 (es) Atenuación de pre-ecos en una señal de audio digital
ES2732859T3 (es) Codificador, descodificador, método de codificación, método de descodificación, programa de codificación, programa de descodificación y medio de grabación
ES2635026T3 (es) Aparato y procedimiento de codificación, procesamiento y decodificación de envolvente de señal de audio por división de la envolvente de la señal de audio utilizando cuantización y codificación de distribución
JP2011009861A (ja) 符号化方法、復号方法、符号化器、復号器、プログラム