ES2780000T3 - Seleccionar un procedimiento de ocultación de pérdida de paquetes - Google Patents
Seleccionar un procedimiento de ocultación de pérdida de paquetes Download PDFInfo
- Publication number
- ES2780000T3 ES2780000T3 ES18189691T ES18189691T ES2780000T3 ES 2780000 T3 ES2780000 T3 ES 2780000T3 ES 18189691 T ES18189691 T ES 18189691T ES 18189691 T ES18189691 T ES 18189691T ES 2780000 T3 ES2780000 T3 ES 2780000T3
- Authority
- ES
- Spain
- Prior art keywords
- audio
- type
- spectral envelope
- received audio
- signals
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 83
- 230000003595 spectral effect Effects 0.000 claims abstract description 47
- 230000004044 response Effects 0.000 claims abstract description 6
- 238000004590 computer program Methods 0.000 claims description 21
- 238000005259 measurement Methods 0.000 claims description 16
- 230000005236 sound signal Effects 0.000 description 20
- 238000004458 analytical method Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000010295 mobile communication Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000007774 longterm Effects 0.000 description 3
- 230000000737 periodic effect Effects 0.000 description 3
- 230000003044 adaptive effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000002085 persistent effect Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000001228 spectrum Methods 0.000 description 2
- 230000002459 sustained effect Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 241000760358 Enodes Species 0.000 description 1
- ZYXYTGQFPZEUFX-UHFFFAOYSA-N benzpyrimoxan Chemical compound O1C(OCCC1)C=1C(=NC=NC=1)OCC1=CC=C(C=C1)C(F)(F)F ZYXYTGQFPZEUFX-UHFFFAOYSA-N 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000005284 excitation Effects 0.000 description 1
- 238000005562 fading Methods 0.000 description 1
- 210000004704 glottis Anatomy 0.000 description 1
- 238000010348 incorporation Methods 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 238000013468 resource allocation Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0823—Errors, e.g. transmission errors
- H04L43/0829—Packet loss
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
- G10L19/005—Correction of errors induced by the transmission channel, if related to the coding algorithm
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
- G10L25/18—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being spectral information of each sub-band
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/40—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass for recovering from a failure of a protocol instance or entity, e.g. service redundancy protocols, protocol state redundancy or protocol service redirection
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Acoustics & Sound (AREA)
- Computer Security & Cryptography (AREA)
- Environmental & Geological Engineering (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Mobile Radio Communication Systems (AREA)
- Telephonic Communication Services (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Reverberation, Karaoke And Other Acoustics (AREA)
Abstract
Un método para seleccionar un procedimiento de ocultación de pérdida de paquetes, comprendiendo el método: detectar (40) un tipo de audio de una trama de audio recibida, en el que detectar (40) un tipo de audio comprende determinar (41) una estabilidad de una envolvente espectral de señales de tramas de audio recibidas; y en respuesta a detectar una pérdida de trama, determinar (44) un procedimiento de ocultación de pérdida de paquetes basado al menos parcialmente en el tipo de audio de la anterior trama de audio recibida correctamente.
Description
DESCRIPCIÓN
Seleccionar un procedimiento de ocultación de pérdida de paquetes
Campo técnico
La descripción se refiere a decodificación de audio y más en particular a la selección de un procedimiento de ocultación de pérdida de paquetes en decodificación de audio.
Antecedentes
Las redes de comunicaciones móviles evolucionan hacia la consecución de mayores velocidades de transmisión de datos, así como de una capacidad y una cobertura mejoradas. En el organismo de estandarización del Proyecto Asociativo de Tercera Generación (3GPP, 3rd Generation Partnership Project), se han desarrollado y actualmente también se están desarrollando diversas tecnologías.
La tecnología LTE (Evolución a Largo Plazo, Long Term Evolution) es una tecnología estandarizada reciente. Utiliza una tecnología de acceso basada en OFDM (Multiplexación por División de Frecuencia Ortogonal, Orthogonal Frequency Division Multiplexing) para el enlace descendente y FDMA de Portadora Única (SC-FDMA, Single Carrier FDMA) para el enlace ascendente. La asignación de recursos a terminales inalámbricos (también conocidos como equipos de usuario, UEs) tanto en el enlace descendente como en el enlace ascendente se lleva a cabo generalmente de manera adaptativa utilizando planificación rápida, teniendo en cuenta el patrón de tráfico instantáneo y las características de propagación de radio de cada terminal inalámbrico. La asignación de recursos tanto en el enlace descendente como en el enlace ascendente se lleva a cabo en el planificador situado en la estación de base para redes móviles.
Para transmisiones de datos de audio, así como para todos los datos sobre interfaces inalámbricas, hay ocasiones en los que existe pérdida de datos, como por ejemplo debido a pérdidas de trayecto, interferencia, etc. Cuando se pierde una trama de audio, un decodificador de audio receptor puede detectar la pérdida de trama de audio y puede entonces llevar a cabo un procedimiento de ocultación de pérdida de paquetes (PLC, Packet Loss Concealment) para generar audio que reduzca de la mejor manera posible los efectos de la pérdida del paquete de audio.
Sin embargo, existen diversos procedimientos de PLC posibles y resultaría beneficioso seleccionar de manera correcta qué procedimiento PLC se debe utilizar en diferentes situaciones.
La patente europea EP 1458145 describe un método para seleccionar y aplicar de manera dinámica diferentes técnicas de ocultación de error en tiempo de ejecución en el lado del receptor.
Sumario de la invención
La invención se define en la reivindicación independiente 1 de método, reivindicación independiente 7 relacionada con un dispositivo servidor, reivindicación independiente 14 relacionada con un programa de ordenador y la reivindicación independiente 15 relacionada con un producto de programa de ordenador.
Breve descripción de los dibujos
Se describe a continuación la invención, a modo de ejemplo, haciendo referencia a los dibujos adjuntos, en los cuales:
la Figura 1 es un diagrama esquemático que ilustra una red de comunicaciones móviles en la que pueden aplicarse realizaciones descritas en la presente memoria;
la Figura 2 es un diagrama esquemático que ilustra transmisiones de tramas de audio a un terminal inalámbrico de la Figura 1;
la Figura 3 es un gráfico esquemático que ilustra una envolvente espectral de señales de tramas de audio recibidas;
las Figuras 4A-B son diagramas de flujo que ilustran métodos llevados a cabo en un dispositivo servidor perteneciente a la Figura 1 para seleccionar un procedimiento de ocultación de pérdida de paquetes;
la Figura 5 es un diagrama esquemático que muestra algunos componentes del terminal inalámbrico de la Figura 1; la Figura 6 es un diagrama esquemático que muestra algunos componentes del nodo de transcodificación de la Figura 1; y
la Figura 7 muestra un ejemplo de un producto de programa de ordenador que comprende un medio legible por ordenador.
Descripción detallada
Se describirá ahora la invención de manera más completa a partir de este momento haciendo referencia a los dibujos adjuntos, en los que se muestran ciertas realizaciones de la invención. Esta invención puede, sin embargo, ser realizada de muchas formas diferentes y no debería considerarse como limitada a las realizaciones establecidas en la presente memoria; antes bien, estas realizaciones se proporcionan a modo de ejemplo para que esta descripción sea concienzuda y completa, y transmita de manera completa el alcance de la invención a aquellas personas expertas en la técnica. A lo largo de la descripción, números semejantes hacen referencia a elementos semejantes.
La Figura 1 es un diagrama esquemático que ilustra una red 8 de comunicaciones móviles en la que pueden aplicarse realizaciones descritas en la presente memoria. La red 8 de comunicaciones móviles comprende una red 3 de núcleo y una estación 1 de base para redes móviles o más de una, que aquí tiene la forma de Nodos B evolucionados también conocidos como eNodos B o eNBs. La estación 1 de base para redes móviles también podría tener la forma de Nodos B, BTSs (Estaciones Transceptoras de Base, Base Transceiver Stations) y/o BSSs (Subsistemas de Estación de Base, Base Station Subsystems), etc. La estación 1 de base para redes móviles proporciona conectividad de radio a una pluralidad de terminales 2 inalámbricos. El término terminal inalámbrico se conoce también como terminal de comunicaciones móviles, equipo de usuario (UE), terminal móvil, terminal de usuario, agente de usuario, dispositivo inalámbrico, dispositivo de máquina a máquina, etc., y pueden ser, por ejemplo, lo que hoy son elementos conocidos como teléfonos móviles o un ordenador portátil o tableta con conectividad inalámbrica o un terminal fijo.
La red 8 de comunicaciones móviles puede cumplir por ejemplo con una cualquiera o con una combinación de tecnologías LTE (Evolución a Largo Plazo, Long Term Evolution), W-CDMA (Acceso Múltiple por División de Código de Banda Ancha, Wideband Code Division Múltiple Access), EDGE (Evolución de Velocidades de Transmisión de Datos Mejoradas para GSM [Sistema Global para Comunicaciones Móviles], Enhanced Data Rates for GSM [Global System for Mobile communication] Evolution), GPRS (Servicio General de Radio por Paquetes, General Packet Radio Service), CDMA2000 (Acceso Múltiple por División de Código 2000, Code Division Multiple Access 2000), o bien cualquier otra red inalámbrica actual o futura, tal como una red LTE-Avanzada, siempre que sean de aplicación los principios descritos en la presente memoria.
La comunicación mediante el enlace 4a ascendente (UL) desde el terminal 2 inalámbrico y la comunicación mediante el enlace 4b descendente (DL) hacia el terminal 2 inalámbrico entre el terminal 2 inalámbrico y la estación 1 de base para redes móviles se produce mediante una interfaz de radiocomunicaciones inalámbricas. La calidad de la interfaz de radiocomunicaciones inalámbricas a cada terminal 2 inalámbrico puede variar a lo largo del tiempo dependiendo de la posición del terminal 2 inalámbrico, debido a efectos tales como desvanecimiento, propagación multi-trayecto, interferencia, etc.
La estación 1 de base para redes móviles también está conectada a la red 3 de núcleo para la conectividad a funciones centrales y a una red 7 externa, tal como la Red Pública Telefónica Conmutada (PSTN, Public Switched Telephone Network) y/o la red Internet.
Los datos de audio pueden ser codificados y decodificados por el terminal 2 inalámbrico y/o un nodo 5 de transcodificación, que es un nodo de red dispuesto para llevar a cabo la transcodificación de audio. El nodo 5 de transcodificación puede implementarse, por ejemplo, en una MGW (Pasarela de Medios, Media Gateway), una SBG/BGF (Pasarela de Frontera de Sesión / Función de Puerta de Enlace, Session Border Gateway / Border Gateway Function), o un MRFP (Procesador de Función de Recursos de Medios, Media Resource Function Processor). Por lo tanto, tanto el terminal 2 inalámbrico como el nodo 5 de transcodificación son dispositivos servidores que comprenden un decodificador de audio respectivo.
La Figura 2 es un diagrama esquemático que ilustra transmisiones de tramas de audio a un terminal inalámbrico de la Figura 1. Cuando se recibe de audio, por ejemplo en una conversación de voz o incluso en una transferencia continua de audio, el terminal 2 inalámbrico recibe un flujo de tramas 15a-c de audio consecutivas. Cada trama de audio, con una longitud de por ejemplo entre 20 y 40 milisegundos, constituye un conjunto de datos representado digitalmente y comprende una señal, es decir, una señal de audio, codificada en un formato apropiado.
En este ejemplo, el terminal 2 inalámbrico recibe una primera trama 15a de audio y una segunda trama 15b de audio de manera exitosa. Esto permite al terminal 2 inalámbrico y codificar la señal de audio comprendida en las tramas 15a-b de audio. Sin embargo, debido a unas condiciones de comunicación por radio pobres, la tercera trama 15c de audio no se recibe de manera exitosa. El decodificador de audio en el terminal 2 inalámbrico detecta la tercera trama de audio perdida y puede entonces llevar a cabo un procedimiento de Ocultación de Pérdida de Paquetes (PLC, Packet Loss Concealment) para generar audio que reduzca de la mejor manera posible los efectos de la pérdida del paquete de audio.
Cómo tomar una decisión entre una multitud de procedimientos PLC en el seno de un decodificador de audio de tal manera que se seleccione ese procedimiento que proporciona la mejor calidad de audio posible constituye un problema.
De manera más específica, un decodificador de audio puede implementar al menos dos procedimientos PLC diferentes, donde uno de ellos es especialmente apropiado para señales musicales mientras que un segundo procedimiento PLC es más apropiado para señales no musicales, como por ejemplo la voz. Con el fin de ser capaces de elegir el procedimiento PLC más apropiado, la señal de audio (codificada) que se ha recibido en buenas condiciones, es decir, en forma de paquetes (15a-b) libres de errores y no eliminados, es analizada y, sobre la base de dicho análisis, se lleva a cabo la elección del procedimiento PLC.
Un problema particular es adaptar la decisión del procedimiento de selección de PLC de tal manera que las posibilidades individuales específicas de los procedimientos PLC disponibles se utilicen de una manera beneficiosa. Esto implica encontrar una métrica apropiada relacionada con la señal que esté asociada con el análisis de la señal de audio recibida (o con los parámetros de codificación de la misma), y encontrar un procedimiento de decisión apropiado que seleccione el procedimiento PLC sobre la base de la métrica. Para codificadores/decodificadores (códecs) de audio basados en trama, también resulta deseable que la decisión del procedimiento PLC pueda tomarse sobre una base trama a trama, es decir, que pueda tomarse una decisión en respuesta a una trama de audio buena recibida en este momento y en datos de audio recibidas con anterioridad.
Un procedimiento PLC reciente para audio es el así llamado ECU de Fase (Phase ECU). Se trata de un procedimiento que proporciona una calidad de la señal de audio restaurada particularmente alta después de una pérdida de paquetes en el caso en el que la señal sea una señal musical.
El método ECU de Fase consiste en una ocultación basada en evolución de fase senoidal. Se basa en el paradigma de análisis y síntesis senoidal llevado a cabo en el dominio DFT (Transformada Discreta de Fourier, Discrete Fourier Transform). Se asume que una señal de audio está compuesta por un número limitado de componentes senoidales individuales. En la etapa de análisis, se identifican las componentes senoidales de una trama de audio sintetizada previamente. En la etapa de síntesis, éstas componentes senoidales evolucionan en fase hasta el instante de tiempo de la trama perdida. Se lleva a cabo un refinamiento interpolador de frecuencia senoidal para aumentar la resolución de frecuencia por encima de la de la DFT. En lugar de poner a cero o de ajustar la magnitud de los coeficientes DFT que no pertenecen a los picos espectrales, las magnitudes DFT originales son retenidas mientras que se utiliza una randomización de fase adaptativa.
Otra clase de procedimientos PLC son aquéllos que incorporan un modelo de tono. Una suposición subyacente de tales procedimientos es que la señal puede contener segmentos de voz correspondientes a voz humana, en los cuales la señal es periódica con una frecuencia fundamental que corresponde a una excitación de la glotis. A través de la incorporación de un modelo de tono tal, el procedimiento PLC puede conseguir una calidad de la señal de audio restaurado particularmente buena en el caso en el que la señal corresponda a una voz vocalizada.
Es sabido que la ECU de Fase funciona muy bien para música tonal (tonos sostenidos de un solo instrumento o de múltiples instrumentos) y también para señales musicales complejas (orquesta, música pop). Por otro lado, a veces existen deficiencias en la ECU de Fase para una señal de voz y en particular para voz vocalizada.
Por otro lado, resulta notable que procedimientos PLC que incorporan un modelo de tono no tienen a menudo un rendimiento óptimo con señales musicales y señales de audio genéricas periódicas. Antes bien, se observa que señales de audio genéricas periódicas tales como música tonal (tonos sostenidos de un solo instrumento o de múltiples instrumentos) resultan menos apropiadas para procedimientos PLC que utilizan un modelo de tono.
La Figura 3 es un gráfico esquemático que ilustra una envolvente 10 espectral de señales de trama de audio recibidas. El eje horizontal representa frecuencia y el eje vertical representa amplitud, como por ejemplo potencia, etc.
Fijando la atención ahora tanto en la Figura 2 como en la Figura 3, se presentarán conceptos relativos a cómo se selecciona un procedimiento PLC en un decodificador de audio. Debe apreciarse que esto puede llevarse a cabo en un decodificador de audio del terminal inalámbrico y/o del nodo de transcodificación de la Figura 1.
Una solución para seleccionar un procedimiento PLC en un decodificador de audio que implementa al menos dos procedimientos PLC diferentes consiste en utilizar una medida de estabilidad de envolvente espectral en la selección del procedimiento PLC. Ello implica una primera etapa de analizar al menos una trama de señal de audio recibida con anterioridad con respecto a su estabilidad de envolvente espectral relativa a la envolvente espectral de al menos una trama adicional de señal de audio recibida con anterioridad. El resultado de esta etapa de análisis es una medida de estabilidad de envolvente que se utiliza en un segundo paso. En esa segunda etapa, la medida de estabilidad de envolvente se utiliza en un algoritmo de decisión que, en respuesta a al menos esa medida, selecciona uno de entre una multitud de procedimientos PLC, en el caso de que una trama de audio posterior se borre o se deteriore como consecuencia de una pérdida o de un error de transmisión de un paquete de audio.
Se asume que el decodificador de audio recibe paquetes de datos de audio codificados, que están estructurados en conjuntos tal como se muestra en la Figura 2. Cada conjunto de datos de audio codificados representa una trama 15a-c de la señal de audio codificada. Los conjuntos de datos de audio codificados son generados por un codificador de audio como resultado de la codificación de la señal de audio original. Los conjuntos de datos de audio codificados son transmitidos en paquetes hasta el decodificador, típicamente como un conjunto o múltiples conjuntos por
paquete o, en algunos casos, como conjuntos parciales por paquete.
Después de la recepción de los paquetes, el receptor de audio identifica los conjuntos de datos de audio codificados recibidos correctamente que pueden ser decodificados por el decodificador de audio. Los conjuntos que corresponden a paquetes corruptos o perdidos no están disponibles para decodificación y las tramas de señal de audio correspondientes necesitan en realidad ser restauradas por uno de los procedimientos PLC disponibles. La selección del procedimiento PLC que va a utilizarse para una trama de audio perdida dada se describe a continuación.
En primer lugar, se detecta el tipo de audio (ver paso 40 en las Figuras 4A-B) de modo que al menos una trama de audio recibida correctamente con anterioridad o sus parámetros de codificación relacionados se analizan y se almacenan en una memoria para una potencial pérdida de tramas posterior (por ejemplo, en la memoria 53 de datos de la Figura 5 o la 63 de la Figura 6). Típicamente, este análisis se lleva a cabo con la trama de audio recibida correctamente más reciente antes de la pérdida. El análisis evalúa si la señal de audio es probablemente una señal de voz o una señal musical. El resultado de este análisis puede estar constituido por una medida definida en un intervalo de valores, como por ejemplo entre 0 y 1, en el que un valor cercano a 0 representa una alta probabilidad de que la señal sea voz y un valor cercano a 1 representa una alta probabilidad de que la señal sea música, o viceversa.
Una realización de la etapa de análisis consiste en utilizar la estabilidad de envolvente espectral como una medida para la probabilidad de que la trama de señal sea voz o música. El antecedente que justifica la utilización de la estabilidad de envolvente espectral como un indicador tal es la observación de que la música tiende a tener una envolvente espectral relativamente estable a lo largo del tiempo o bien que la envolvente espectral evoluciona lentamente a lo largo del tiempo, mientras que se observa lo contrario en el caso de la voz. Esta medida evalúa la variabilidad de la envolvente espectral de la señal de audio en el dominio de las energías de sub-bandas espectrales (también conocidas como factores de escala o normas). Puede apreciarse que esta medida puede utilizarse también, por ejemplo, en un códec de audio para controlar el umbral de ruido de sub-bandas espectrales.
Una manera de calcular la medida de estabilidad de envolvente espectral consiste en comparar una representación de envolvente espectral, como por ejemplo un espectro de magnitud de la trama recibida correctamente más reciente, con la representación de envolvente espectral de al menos una trama recibida anteriormente, de la cual se ha almacenado en una memoria una representación. Si tienden a producirse cambios relativamente fuertes en la envolvente, se asume que la señal es de tipo voz y, en caso contrario, se asume que representa música. Por consiguiente, el valor de la estabilidad de envolvente se fijará en valores cercanos a 0 o, respectivamente, cercanos a 1. Una idea inventiva es que para pérdidas de tramas de señales en las que el indicador de estabilidad de envolvente anterior a la pérdida indica una alta estabilidad, debería seleccionarse un procedimiento PLC más apropiado para señales musicales.
La decisión real del procedimiento PLC se lleva a cabo en una segunda etapa, ver etapa 44 de las Figuras 4A-B. Aquí, la medida de estabilidad de envolvente calculada en una trama buena anterior a la pérdida de trama se restaura en primer lugar desde una memoria y a continuación se compara con un umbral. Como ejemplo, el umbral podría ser 0,5. Si la medida de estabilidad de envolvente excede el umbral, se elige el procedimiento PLC para señales musicales y, en caso contrario, se elige el procedimiento PLC para señales de voz.
Según una realización, el método de decisión basado en la estabilidad de envolvente descrito se utiliza en un nivel de un método de decisión multi-nivel. Aquí, se toma una primera decisión que se base en la medida de estabilidad envolvente sobre si se selecciona el procedimiento PLC más apropiado para música. De nuevo, si la medida de estabilidad está por encima de un cierto umbral, se elegirá el procedimiento PLC para señal musical. Sin embargo, si este no es el caso, puede estar implicado un segundo método de decisión que compara otras medidas derivadas de la última trama de audio buena con un cierto umbral. Ejemplos de otras medidas son parámetros que pueden utilizarse para discriminar voz vocalizada de voz no vocalizada, como por ejemplo una ganancia de predicción de tono (ganancia de predicción a largo plazo) o, por ejemplo, la inclinación del espectro de envolvente. Si estos valores indican que la señal de audio es probablemente voz vocalizada (por medio de valores relativamente grandes), entonces el selector elige el procedimiento PLC que es más apropiado para señales de voz y, en caso contrario, se selecciona el procedimiento PLC apropiado para música.
Según una realización adicional, la decisión del procedimiento PLC, además de la medida de estabilidad de envolvente como un criterio de decisión, puede también implicar el cálculo de medidas adicionales y su comparación con umbrales apropiados. Tales medidas, por ejemplo, pueden ser un indicador VAD (Detector de Actividad de Voz, Voice Activity Detector), parámetros de potencia, medidas sobre la tonalidad de la señal, medidas sobre cuán armónica es la señal, medidas sobre cuán compleja es espectralmente la señal, etc. Una señal muy tonal tendría un número relativamente pequeño de picos espectrales distintos que serían relativamente estables comparados con alguna trama de audio anterior. Una señal armónica podría tener picos espectrales distintos a una frecuencia fundamental y a múltiplos enteros de la misma. Una señal de audio espectralmente compleja (como, por ejemplo, la que corresponde a música de orquesta con muchos instrumentos contribuyendo al sonido) tendría un número relativamente grande de picos espectrales con una relación poco clara entre ellos. El método de decisión podría tener en cuenta tales medidas adicionales, además de la estabilidad de envolvente, para determinar el
procedimiento PLC que será utilizado para la trama perdida.
Según una realización, el procedimiento PLC que resulta más apropiado para ser utilizado en la detección de señales musicales, o de señales con una envolvente espectral relativamente estable, señales tonales, y/o señales espectralmente complejas es la ECU de Fase. Señales para las que debería seleccionarse en su lugar otro procedimiento PLC, con modelo de tono, son aquellas que se clasifican como voz y especialmente voz vocalizada, y señales que poseen una estructura espectral armónica y/o una inclinación espectral típica de la voz vocalizada. Las Figuras 4A-B son diagramas de flujo que ilustran métodos llevados a cabo en un decodificador de audio de un dispositivo servidor (terminal inalámbrico y/o nodo de transcodificación de la Figura 1) para seleccionar un procedimiento de ocultación de pérdida de paquetes.
En una etapa 40 de detectar tipo de audio, se detecta un tipo de audio de una trama de audio recibida. Esto puede comprender determinar si el tipo de audio es bien música o bien voz. De manera opcional, existen más tipos de audio posibles, que comprenden potencialmente un tipo de audio “desconocido”.
En una realización, el tipo de audio se determina como música cuando la envolvente espectral de señales de audio recibidas es estable. En un caso tal, el tipo de audio se determina como voz cuando la envolvente espectral de señales de audio recibidas es inestable. La estabilidad y la inestabilidad pueden definirse, por ejemplo, mediante la comparación con un valor umbral cuando la estabilidad de la envolvente espectral es un escalar.
De manera opcional, se utiliza histéresis en esta etapa para evitar saltar hacia atrás y hacia adelante en la detección del tipo de audio. De manera alternativa o de manera adicional, puede utilizarse una cadena de Markov para aumentar la estabilidad en la clasificación.
En una etapa 44 de determinar el procedimiento PLC, se determina un procedimiento de ocultación de pérdida de paquetes que se basa en el tipo de audio.
El método puede repetirse según se van recibiendo nuevas tramas de audio, para garantizar que se determina el tipo de audio más reciente.
La Figura 4B ilustra un método para seleccionar un procedimiento de ocultación de pérdida de paquetes según una realización. Este método es similar al método ilustrado en la Figura 4A, y solo se describirán etapas nuevos o etapas modificados en relación a la Figura 4A.
Aquí, la etapa 40 de detectar tipo de audio comprende una etapa 41 de determinar la estabilidad de la envolvente espectral opcional y/o una etapa 42 de determinar segunda medida opcional.
En la etapa 41 de determinar la estabilidad de la envolvente espectral opcional, se determina una estabilidad de una envolvente espectral de señales de tramas de audio recibidas. Tal como se explicó anteriormente, esto puede conseguirse comparando una envolvente espectral de señales de dos (o más) tramas de audio consecutivas recibidas correctamente.
De manera opcional, una medida escalar relacionada con la envolvente espectral de señales recibidas de tramas de audio recibidas se calcula, por ejemplo, con un valor entre 0 y 1 tal como se describió anteriormente.
En la etapa 42 de determinar segunda medida opcional, se determina una segunda medida de una trama de audio recibida. La segunda medida comprende un indicador seleccionado de entre un grupo que consiste en una ganancia de predicción de tono, una inclinación de la envolvente espectral, un indicador de detección de actividad de voz, parámetros de potencia, medida de una tonalidad de la señal, medida de cuán armónica es la señal, y medida de cuán compleja especialmente es la señal.
La Figura 5 es un diagrama esquemático que muestra algunos componentes del terminal 2 inalámbrico de la Figura 1. Se proporciona un procesador 50 utilizando cualquier combinación de uno o más elementos apropiados de entre el conjunto formado por una unidad central de procesamiento (CPU), un multiprocesador, un microcontrolador, un procesador digital de señal (DSP), un circuito integrado de aplicación específica, etc., capaces de ejecutar instrucciones 56 de software almacenadas en una memoria 54, que puede por lo tanto ser un producto de programa de ordenador. El procesador 50 puede configurarse para ejecutar las instrucciones 56 de software para llevar a cabo cualquiera de las realizaciones de los métodos descritos haciendo referencia a las Figuras 4A-B mostradas anteriormente, o más de una.
La memoria 54 puede ser cualquier combinación de memoria de lectura y escritura (RAM) y de memoria de sólo lectura (ROM). La memoria 54 también comprende almacenaje persistente, que, por ejemplo, puede estar constituido por un elemento o una combinación de elementos de entre el conjunto formado por memoria magnética, memoria óptica, memoria de estado sólido o incluso memoria montada de manera remota.
Se proporciona también una memoria 53 de datos para la lectura y/o el almacenamiento de datos durante la ejecución de las instrucciones de software en el procesador 50. La memoria 53 de datos puede estar constituida por cualquier combinación de una memoria de lectura y escritura (RAM) y una memoria de sólo lectura (ROM).
El terminal 2 inalámbrico comprende adicionalmente una interfaz 52 de I/O (de entrada/salida) para la comunicación con otras entidades externas. La interfaz 52 de I/O también incluye una interfaz de usuario que comprende un micrófono, un altavoz, un visualizador, etc. De manera opcional, puede conectarse un micrófono externo y/o un altavoz/auricular externo al terminal inalámbrico.
El terminal 2 inalámbrico también comprende un transceptor 51 o más de uno, que comprende componentes analógicos y digitales, y un número apropiado de antenas 55 para comunicación inalámbrica con terminales inalámbricos tal como se muestra en la Figura 1.
El terminal 2 inalámbrico comprende un codificador de audio y un decodificador de audio. Estos elementos pueden implementarse en las instrucciones 56 de software ejecutables por el procesador 50 o bien utilizando hardware separado (no mostrado).
Otros componentes del terminal 2 inalámbrico se omiten con el fin de no oscurecer los conceptos presentados en la presente memoria.
La Figura 6 es un diagrama esquemático que muestra algunos componentes del nodo 5 de transcodificación de la Figura 1. Se proporciona un procesador 60 utilizando cualquier combinación de uno o más elementos apropiados de entre el conjunto formado por una unidad central de procesamiento (CPU), un multiprocesador, un microcontrolador, un procesador digital de señal (DSP), un circuito integrado de aplicación específica, etc., capaces de ejecutar instrucciones 66 de software almacenadas en una memoria 64, que puede por lo tanto ser un producto de programa de ordenador. El procesador 60 puede configurarse para ejecutar las instrucciones 66 de software para llevar a cabo cualquiera de las realizaciones de los métodos descritos haciendo referencia a las Figuras 4A-B mostradas anteriormente, o más de una.
La memoria 64 puede ser cualquier combinación de memoria de lectura y escritura (RAM) y de memoria de sólo lectura (ROM). La memoria 64 también comprende almacenaje persistente, que, por ejemplo, puede estar constituido por un elemento o una combinación de elementos de entre el conjunto formado por memoria magnética, memoria óptica, memoria de estado sólido o incluso memoria montada de manera remota.
Se proporciona también una memoria 63 de datos para la lectura y/o el almacenamiento de datos durante la ejecución de las instrucciones de software en el procesador 60. La memoria 63 de datos puede estar constituida por cualquier combinación de una memoria de lectura y escritura (RAM) y una memoria de sólo lectura (ROM).
El nodo 5 de transcodificación comprende adicionalmente una interfaz 62 de I/O para la comunicación con otras entidades externas tales como el terminal inalámbrico de la Figura 1 (utilizando la estación 1 de base para redes móviles).
El nodo 5 de transcodificación comprende un codificador de audio y un decodificador de audio. Estos elementos pueden implementarse en las instrucciones 66 de software ejecutables por el procesador 60 o bien utilizando hardware separado (no mostrado).
Otros componentes del nodo 5 de transcodificación se omiten con el fin de no oscurecer los conceptos presentados en la presente memoria.
La Figura 7 muestra un ejemplo de un producto 90 de programa de ordenador que comprende un medio legible por ordenador. En este medio legible por ordenador puede almacenarse un programa 91 de ordenador, programa de ordenador que puede hacer que un procesador ejecute un método según las realizaciones descritas en la presente memoria. En este ejemplo, el producto de programa de ordenador es un disco óptico, tal como un CD (disco compacto) o un DVD (disco versátil digital) o un disco Blu-Ray. Tal como se explicó anteriormente, el producto de programa de ordenador también podría realizarse en una memoria de un dispositivo, tal como el producto 54 de programa de ordenador de la Figura 5 o el producto 64 de programa de ordenador de la Figura 6. Mientras que el programa 91 de ordenador se representa aquí de manera esquemática como una pista en el disco óptico mostrado, el programa de ordenador puede almacenarse de cualquier forma que resulte apropiada para el producto de programa de ordenador, tal como una memoria de estado sólido retirable (por ejemplo, un lápiz de memoria de Bus de Serie Universal [USB]).
Claims (15)
1. Un método para seleccionar un procedimiento de ocultación de pérdida de paquetes, comprendiendo el método: detectar (40) un tipo de audio de una trama de audio recibida, en el que detectar (40) un tipo de audio comprende determinar (41) una estabilidad de una envolvente espectral de señales de tramas de audio recibidas; y en respuesta a detectar una pérdida de trama, determinar (44) un procedimiento de ocultación de pérdida de paquetes basado al menos parcialmente en el tipo de audio de la anterior trama de audio recibida correctamente.
2. El método según la reivindicación 1, en el que determinar (41) la estabilidad de la envolvente espectral de señales de tramas de audio recibidas comprende comparar la envolvente espectral de señales de al menos dos tramas de audio consecutivas recibidas correctamente.
3. El método según la reivindicación 1 o 2, en el que determinar (41) la estabilidad de la envolvente espectral de señales de tramas de audio recibidas comprende calcular una medida escalar relacionada con la envolvente espectral de señales recibidas de tramas de audio recibidas.
4. El método según una cualquiera de las reivindicaciones precedentes, en el que detectar (40) un tipo de audio comprende determinar si el tipo de audio es música o es voz.
5. El método según la reivindicación 4, en el que detectar (40) un tipo de audio comprende determinar que el tipo de audio es música cuando la envolvente espectral de señales de tramas de audio recibidas es estable, y determinar que el tipo de audio es voz cuando la envolvente espectral de señales de tramas de audio recibidas es inestable.
6. El método según las reivindicaciones 4 o 5, en el que se selecciona un procedimiento de ocultación de pérdida de paquetes basado en evolución de fase senoidal, ECU de Fase, en el caso en el que la determinación del tipo de audio indique que el tipo de audio es música.
7. Un dispositivo (2, 5) servidor para seleccionar un procedimiento de ocultación de pérdida de paquetes, en el que el dispositivo servidor comprende:
un procesador (50, 60); y
una memoria (54, 64) que almacena instrucciones (56, 66) que, cuando son ejecutadas por el procesador, hacen que el dispositivo (2, 5) servidor:
detecte un tipo de audio de una trama de audio recibida;
en el que detectar un tipo de audio comprende determinar una estabilidad de una envolvente espectral de señales de tramas de audio recibidas y
en respuesta a detectar una pérdida de trama, determinar un procedimiento de ocultación de pérdida de paquetes basados al menos parcialmente en el tipo de audio de la anterior trama de audio recibida correctamente.
8. El dispositivo (2, 5) servidor según la reivindicación 7, en el que las instrucciones para determinar la estabilidad de la envolvente espectral de señales de tramas de audio recibidas comprenden instrucciones que, cuando son ejecutadas por el procesador, hacen que el dispositivo (2, 5) servidor compare la envolvente espectral de señales de al menos dos tramas de audio consecutivas recibidas correctamente.
9. El dispositivo (2, 5) servidor según las reivindicaciones 7 o 8, en el que las instrucciones para determinar la estabilidad de la envolvente espectral de señales de tramas de audio recibidas comprenden instrucciones que, cuando son ejecutadas por el procesador, hacen que el dispositivo (2, 5) servidor calcule una medida escalar relacionada con la envolvente espectral de señales de tramas de audio recibidas.
10. El dispositivo (2, 5) servidor según una cualquiera de las reivindicaciones 7 a 9, en el que las instrucciones para detectar un tipo de audio comprenden instrucciones que, cuando son ejecutadas por el procesador, hacen que el dispositivo (2, 5) servidor determine si el tipo de audio es música o bien voz.
11. El dispositivo (2, 5) servidor según la reivindicación 10, en el que las instrucciones para detectar un tipo de audio comprenden instrucciones que, cuando son ejecutadas por el procesador, hacen que el dispositivo (2, 5) servidor determina que el tipo de audio es música cuando la envolvente espectral de señales de la trama de audio recibida sea estable y determina que el tipo de audio es voz cuando la envolvente espectral de señales de la trama de audio recibida sea inestable.
12. El dispositivo (2) servidor según una cualquiera de las reivindicaciones 7 a 11, en el que el dispositivo servidor es un terminal (2) inalámbrico.
13. El dispositivo (5) según una cualquiera de las reivindicaciones 7 a 11, en el que el dispositivo (5) servidor es un
nodo de transcodificación dispuesto para llevar a cabo la transcodificación de audio.
14. Un programa (66, 91) de ordenador para seleccionar un procedimiento de ocultación de pérdida de paquetes, en el que el programa de ordenador comprende código de programa de ordenador que, cuando es ejecutado en un dispositivo (2, 5) servidor, hace que el dispositivo (2, 5) servidor:
detecte un tipo de audio de una trama de audio recibida
en el que detectar un tipo de audio comprende determinar una estabilidad de una envolvente espectral de señales de tramas de audio recibidas; y
en respuesta a detectar una pérdida de trama, determinar un procedimiento de ocultación de pérdida de paquetes basados al menos parcialmente en el tipo de audio de la anterior trama de audio recibida correctamente.
15. Un producto (64, 90) de programa de ordenador que comprende un programa de ordenador según la reivindicación 14 y un medio legible por ordenador en el cual está almacenado el programa de ordenador.
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201461993814P | 2014-05-15 | 2014-05-15 |
Publications (1)
Publication Number | Publication Date |
---|---|
ES2780000T3 true ES2780000T3 (es) | 2020-08-21 |
Family
ID=53385914
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
ES15728656.8T Active ES2650787T3 (es) | 2014-05-15 | 2015-05-12 | Seleccionando un procedimiento de ocultación de pérdida de paquetes |
ES17185288T Active ES2703437T3 (es) | 2014-05-15 | 2015-05-12 | Selección de un procedimiento de ocultación de pérdida de paquetes |
ES18189691T Active ES2780000T3 (es) | 2014-05-15 | 2015-05-12 | Seleccionar un procedimiento de ocultación de pérdida de paquetes |
Family Applications Before (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
ES15728656.8T Active ES2650787T3 (es) | 2014-05-15 | 2015-05-12 | Seleccionando un procedimiento de ocultación de pérdida de paquetes |
ES17185288T Active ES2703437T3 (es) | 2014-05-15 | 2015-05-12 | Selección de un procedimiento de ocultación de pérdida de paquetes |
Country Status (11)
Country | Link |
---|---|
US (5) | US9712414B2 (es) |
EP (3) | EP3258674B1 (es) |
CN (3) | CN110797036B (es) |
BR (1) | BR112016026655B1 (es) |
DK (1) | DK3258674T3 (es) |
ES (3) | ES2650787T3 (es) |
IL (3) | IL248168A (es) |
NO (1) | NO2780522T3 (es) |
PL (3) | PL3422678T3 (es) |
RU (3) | RU2665889C2 (es) |
WO (1) | WO2015174911A1 (es) |
Families Citing this family (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
NO2780522T3 (es) | 2014-05-15 | 2018-06-09 | ||
WO2017153006A1 (en) * | 2016-03-07 | 2017-09-14 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Hybrid concealment method: combination of frequency and time domain packet loss concealment in audio codecs |
EP3483883A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio coding and decoding with selective postfiltering |
EP3483880A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Temporal noise shaping |
EP3483884A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Signal filtering |
EP3483882A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Controlling bandwidth in encoders and/or decoders |
WO2019091576A1 (en) | 2017-11-10 | 2019-05-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio encoders, audio decoders, methods and computer programs adapting an encoding and decoding of least significant bits |
EP3483886A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Selecting pitch lag |
EP3483878A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio decoder supporting a set of different loss concealment tools |
WO2019091573A1 (en) | 2017-11-10 | 2019-05-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus and method for encoding and decoding an audio signal using downsampling or interpolation of scale parameters |
EP3483879A1 (en) | 2017-11-10 | 2019-05-15 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Analysis/synthesis windowing function for modulated lapped transformation |
WO2020165262A2 (en) * | 2019-02-13 | 2020-08-20 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio transmitter processor, audio receiver processor and related methods and computer programs |
WO2020164752A1 (en) | 2019-02-13 | 2020-08-20 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Audio transmitter processor, audio receiver processor and related methods and computer programs |
WO2020169756A1 (en) * | 2019-02-21 | 2020-08-27 | Telefonaktiebolaget Lm Ericsson (Publ) | Methods for frequency domain packet loss concealment and related decoder |
Family Cites Families (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FI963870A (fi) * | 1996-09-27 | 1998-03-28 | Nokia Oy Ab | Virheiden piilottaminen digitaalisessa audiovastaanottimessa |
US6456719B1 (en) * | 1998-01-16 | 2002-09-24 | Winbond Electronics Corp. | Compressed audio error concealment apparatus and method |
US7117156B1 (en) | 1999-04-19 | 2006-10-03 | At&T Corp. | Method and apparatus for performing packet loss or frame erasure concealment |
EP1199709A1 (en) * | 2000-10-20 | 2002-04-24 | Telefonaktiebolaget Lm Ericsson | Error Concealment in relation to decoding of encoded acoustic signals |
US7590525B2 (en) * | 2001-08-17 | 2009-09-15 | Broadcom Corporation | Frame erasure concealment for predictive speech coding based on extrapolation of speech waveform |
CN1323532C (zh) * | 2001-11-15 | 2007-06-27 | 松下电器产业株式会社 | 错误隐蔽装置和方法 |
US7061912B1 (en) | 2002-01-17 | 2006-06-13 | Microtune (San Diego) , Inc. | Method and apparatus of packet loss concealment for CVSD coders |
CA2388439A1 (en) | 2002-05-31 | 2003-11-30 | Voiceage Corporation | A method and device for efficient frame erasure concealment in linear predictive based speech codecs |
SE527669C2 (sv) | 2003-12-19 | 2006-05-09 | Ericsson Telefon Ab L M | Förbättrad felmaskering i frekvensdomänen |
JP2008529073A (ja) * | 2005-01-31 | 2008-07-31 | ソノリト・アンパルトセルスカブ | 重み付けされたオーバーラップ加算方法 |
US7805297B2 (en) * | 2005-11-23 | 2010-09-28 | Broadcom Corporation | Classification-based frame loss concealment for audio signals |
US8015000B2 (en) * | 2006-08-03 | 2011-09-06 | Broadcom Corporation | Classification-based frame loss concealment for audio signals |
CN101366080B (zh) * | 2006-08-15 | 2011-10-19 | 美国博通公司 | 一种更新解码器的状态的方法和系统 |
WO2008022207A2 (en) | 2006-08-15 | 2008-02-21 | Broadcom Corporation | Time-warping of decoded audio signal after packet loss |
CN101155140A (zh) * | 2006-10-01 | 2008-04-02 | 华为技术有限公司 | 音频流错误隐藏的方法、装置和系统 |
FR2907586A1 (fr) * | 2006-10-20 | 2008-04-25 | France Telecom | Synthese de blocs perdus d'un signal audionumerique,avec correction de periode de pitch. |
US8688437B2 (en) * | 2006-12-26 | 2014-04-01 | Huawei Technologies Co., Ltd. | Packet loss concealment for speech coding |
GB0705324D0 (en) * | 2007-03-20 | 2007-04-25 | Skype Ltd | Method of transmitting data in a communication system |
FR2929466A1 (fr) * | 2008-03-28 | 2009-10-02 | France Telecom | Dissimulation d'erreur de transmission dans un signal numerique dans une structure de decodage hierarchique |
US8578247B2 (en) * | 2008-05-08 | 2013-11-05 | Broadcom Corporation | Bit error management methods for wireless audio communication channels |
WO2010031003A1 (en) * | 2008-09-15 | 2010-03-18 | Huawei Technologies Co., Ltd. | Adding second enhancement layer to celp based core layer |
US8676573B2 (en) * | 2009-03-30 | 2014-03-18 | Cambridge Silicon Radio Limited | Error concealment |
JP5529635B2 (ja) * | 2010-06-10 | 2014-06-25 | キヤノン株式会社 | 音声信号処理装置および音声信号処理方法 |
CN103620672B (zh) * | 2011-02-14 | 2016-04-27 | 弗劳恩霍夫应用研究促进协会 | 用于低延迟联合语音及音频编码(usac)中的错误隐藏的装置和方法 |
WO2012158159A1 (en) * | 2011-05-16 | 2012-11-22 | Google Inc. | Packet loss concealment for audio codec |
CN102810313B (zh) | 2011-06-02 | 2014-01-01 | 华为终端有限公司 | 音频解码方法及装置 |
US9047863B2 (en) * | 2012-01-12 | 2015-06-02 | Qualcomm Incorporated | Systems, methods, apparatus, and computer-readable media for criticality threshold control |
US9082398B2 (en) * | 2012-02-28 | 2015-07-14 | Huawei Technologies Co., Ltd. | System and method for post excitation enhancement for low bit rate speech coding |
US20130282372A1 (en) * | 2012-04-23 | 2013-10-24 | Qualcomm Incorporated | Systems and methods for audio signal processing |
CN103714821A (zh) * | 2012-09-28 | 2014-04-09 | 杜比实验室特许公司 | 基于位置的混合域数据包丢失隐藏 |
PL3576087T3 (pl) * | 2013-02-05 | 2021-10-25 | Telefonaktiebolaget Lm Ericsson (Publ) | Ukrywanie klatki utraconej sygnału audio |
EP3125239B1 (en) * | 2013-02-05 | 2019-07-17 | Telefonaktiebolaget LM Ericsson (publ) | Method and appartus for controlling audio frame loss concealment |
US9338551B2 (en) * | 2013-03-15 | 2016-05-10 | Broadcom Corporation | Multi-microphone source tracking and noise suppression |
KR102354331B1 (ko) * | 2014-02-24 | 2022-01-21 | 삼성전자주식회사 | 신호 분류 방법 및 장치, 및 이를 이용한 오디오 부호화방법 및 장치 |
EP2922054A1 (en) * | 2014-03-19 | 2015-09-23 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Apparatus, method and corresponding computer program for generating an error concealment signal using an adaptive noise estimation |
NO2780522T3 (es) | 2014-05-15 | 2018-06-09 |
-
2012
- 2012-11-14 NO NO12795678A patent/NO2780522T3/no unknown
-
2015
- 2015-05-12 RU RU2016149098A patent/RU2665889C2/ru active
- 2015-05-12 PL PL18189691T patent/PL3422678T3/pl unknown
- 2015-05-12 EP EP17185288.2A patent/EP3258674B1/en active Active
- 2015-05-12 RU RU2018128779A patent/RU2704747C2/ru active
- 2015-05-12 CN CN201911216946.0A patent/CN110797036B/zh active Active
- 2015-05-12 ES ES15728656.8T patent/ES2650787T3/es active Active
- 2015-05-12 BR BR112016026655-2A patent/BR112016026655B1/pt active IP Right Grant
- 2015-05-12 PL PL17185288T patent/PL3258674T3/pl unknown
- 2015-05-12 PL PL15728656T patent/PL3111624T3/pl unknown
- 2015-05-12 CN CN201580026185.6A patent/CN106464683B/zh active Active
- 2015-05-12 CN CN201911211452.3A patent/CN110797035B/zh active Active
- 2015-05-12 ES ES17185288T patent/ES2703437T3/es active Active
- 2015-05-12 EP EP15728656.8A patent/EP3111624B1/en active Active
- 2015-05-12 US US15/034,126 patent/US9712414B2/en active Active
- 2015-05-12 WO PCT/SE2015/050530 patent/WO2015174911A1/en active Application Filing
- 2015-05-12 ES ES18189691T patent/ES2780000T3/es active Active
- 2015-05-12 EP EP18189691.1A patent/EP3422678B1/en active Active
- 2015-05-12 DK DK17185288.2T patent/DK3258674T3/en active
-
2016
- 2016-10-02 IL IL248168A patent/IL248168A/en active IP Right Grant
-
2017
- 2017-06-21 US US15/629,426 patent/US10103958B2/en active Active
- 2017-07-02 IL IL253262A patent/IL253262B/en active IP Right Grant
-
2018
- 2018-09-12 US US16/129,211 patent/US10476769B2/en not_active Expired - Fee Related
-
2019
- 2019-10-01 US US16/589,535 patent/US11038787B2/en active Active
- 2019-10-14 RU RU2019132422A patent/RU2019132422A/ru unknown
-
2020
- 2020-06-09 IL IL275257A patent/IL275257B/en active IP Right Grant
-
2021
- 2021-05-11 US US17/317,283 patent/US11729079B2/en active Active
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
ES2780000T3 (es) | Seleccionar un procedimiento de ocultación de pérdida de paquetes | |
ES2656815T3 (es) | Procesador de audio espacial y procedimiento para proporcionar parámetros espaciales en base a una señal de entrada acústica | |
US10121486B2 (en) | Audio signal classification and coding | |
ES2750783T3 (es) | Procedimiento y aparato para controlar la ocultación de pérdida de trama de audio | |
ES2770681T3 (es) | Selección de codificador | |
ES2777282T3 (es) | Extensión de ancho de banda armónico de señales de audio | |
ES2690251T3 (es) | Ajuste del orden de predicción lineal de un codificador de audio | |
ES2642574T3 (es) | Generación de ruido de confort | |
ES2844223T3 (es) | Métodos y aparatos para retención DTX en codificación de audio |