MXPA05000559A - Metodo para ocultamiento de errores en secuencias de video. - Google Patents

Metodo para ocultamiento de errores en secuencias de video.

Info

Publication number
MXPA05000559A
MXPA05000559A MXPA05000559A MXPA05000559A MXPA05000559A MX PA05000559 A MXPA05000559 A MX PA05000559A MX PA05000559 A MXPA05000559 A MX PA05000559A MX PA05000559 A MXPA05000559 A MX PA05000559A MX PA05000559 A MXPA05000559 A MX PA05000559A
Authority
MX
Mexico
Prior art keywords
scene
transition
image
lost
video
Prior art date
Application number
MXPA05000559A
Other languages
English (en)
Inventor
Ye-Kui Wang
Original Assignee
Nokia Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Corp filed Critical Nokia Corp
Publication of MXPA05000559A publication Critical patent/MXPA05000559A/es

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/142Detection of scene cut or scene change
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H04N19/895Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder in combination with error concealment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/147Scene change detection

Abstract

Se describe un metodo y un dispositivo para el ocultamiento de errores en una secuencia de video. Cuando existe una transicion de escena en la secuencia de video y existe un error en una imagen, perteneciente a la transicion de la escena, se utiliza un procedimiento de ocultamiento de errores basado en el tipo de transicion de escena, para ocultar el error. Es proporcionada la informacion respecto al tipo de transicion de escena, para un descodificador de video en un mensaje de informacion de mejoramiento suplementario. Si la transicion de la escena es una transicion de escena gradual, se utiliza un algoritmo de ocultamiento de error espacio-temporal para ocultar la imagen. Si la transicion de la escena es un corte de escena o unicamente una parte de una imagen se pierde o se corrompe, se utiliza un ocultamiento de error espacial para ocultar la parte perdida o corrompida de la imagen. Si una imagen completa perteneciente al corte de escena se pierde o se.

Description

METODO PARA OCULTAMIE TO DE ERRORES EN SECUENCIAS DE VIDEO CAMPO DE LA INVENCION La presente invención se refiere en general a la codificación de vídeo y, en particular, al ocultamiento de artefactos introducidos por errores . ANTECEDENTES DE LA INVENCION Una secuencia de vídeo consiste de una serie de imágenes o cuadros fijos. Los métodos de compresión de vídeo están basados en la reducción de las partes redundantes y perceptualmente irrelevantes de las secuencias de vídeo. La redundancia en las secuencias de vídeo puede ser categorizada en redundancia espectral, espacial y temporal. La redundancia espectral se refiere a la similitud entre los componentes de diferente color de la misma imagen. La redundancia espacial resulta de la similitud entre los pixeles vecinos en una imagen. Existe redundancia temporal debido a que los objetos que aparecen en un cuadro de imagen previa es también probable que aparezca en el cuadro de imagen actual. La compresión puede ser lograda al - tomar ventaja de esta redundancia temporal y predecir la imagen actual a partir de otra imagen, llamada una imagen de referencia. La compresión adicional es lograda mediante la generación de datos de compensación de movimiento que describen el movimiento entre la imagen actual y la imagen de referencia.
Ref . : 161153 Los métodos de compresión de · vídeo típicamente diferencian entre imágenes que utilizan la reducción de la redundancia temporal y aquellas que no lo hacen. Las imágenes comprimidas que no utilizan métodos de reducción de redundancia temporal son usualmente llamados INTRA- (o I-) cuadros o imágenes . Las imágenes temporalmente predichas son usualmente directamente predichas a partir de una imagen que ocurre antes de la imagen actual, y son llamados INTER- o P-cuadros . Una porción de vídeo comprimida típicamente consiste de una secuencia de imágenes, las cuales pueden ser aproximadamente categorizadas en INTRA-imágenes y temporalmente independientes y en INTER-imágenes diferencialmente codificadas temporalmente. Las INTRA-imágenes son típicamente utilizadas para detener la propagación temporal de los errores de transmisión en una señal de vídeo reconstruida y para proporcionar puntos de acceso aleatorios dentro de la corriente de bitios de vídeo. Ya que la eficiencia de compresión proporcionada por las INTRA imágenes es normalmente menor que aquella proporcionada por las INTER-imágenes , que son en general utilizadas escasamente, especialmente en aplicaciones de baja proporción o velocidad de bitios. Una secuencia de vídeo puede ser compuesta de muchas escenas o planos de cámara. Un plano es definido como un grupo de cuadros continuos o imágenes tomadas con una cámara. En general, los cuadros., dentro de - un plano están altamente correlacionados. Sin embargo, en una secuencia de vídeo típica, los contenidos de imagen son significativamente diferentes de una escena a otra, y por lo tanto la primera imagen de una escena es típicamente INTRA-codificada . Los cambios entre los diferentes planos en una secuencia de vídeo son denominadas como "transiciones de escena" . Las transiciones de escena pueden tomar un número de diferentes formas. Por ejemplo, un plano puede terminar y otro más puede comenzar abruptamente en un "corte de escena" . En otros casos, la transición de escena es gradual y ocurre sobre más de un cuadro. Los ejemplos de transiciones de escena graduales son "disoluciones" , "esfumados" (aparición, desaparición graduales) y "agrandamientos graduales" . El vídeo comprimido es fácilmente corrompido por errores de transmisión, principalmente por dos razones. Primeramente, debido a la utilización de errores de codificación diferencial predictivo, temporal (INTER-cuadros) , que son propagados espacial y temporalmente. En segundo lugar, el uso de códigos de longitud variables incrementa la susceptibilidad de las corrientes de vídeo a errores. Pueden existir muchas formas para que un receptor (descodificador de vídeo) se dirija a la corrupción introducida en la vía de transmisión. En general, después de la recepción de una señal, los errores de transmisión son primeramente detectados y luego corregidos o escondidos por el descodificador. El término "corrección de errores" se refiere al proceso para recuperar los datos erróneos perfectamente, si no han sido introducidos errores en el primer lugar, mientras que el "ocultamiento de errores" se refiere al proceso de ocultar los efectos de los errores de transmisión de modo que éstos sean difícilmente visibles en la secuencia de video reconstruida. Actualmente, el descodificador de video es desarrollado por Joint Video Team (JVT) del Grupo de Expertos de Imágenes de Movimiento ISO/IEC y el Grupo de Expertos de Codificación de Vídeo ITU-T para la codificación de vídeo ITU-T H.264/MPEG-4 parte 10 AVC, carece de un método para decidir cómo van a ser ocultados los errores de transmisión en los cuadros INTRA-codificados y en los cuadros de transición de escena, y es en este contexto que ha sido desarrollada la presente invención. BREVE DESCRIPCION DE LA INVENCION Un objetivo de la presente invención proporciona un método mediante el cual una forma apropiada de ocultamiento de error pueda ser elegida para los cuadros que pertenezcan a transiciones de escena en una secuencia de vídeo. El método es igualmente aplicable a transiciones de escenas abruptas (por ejemplo cortes de escena) y transiciones de escenas graduales, por ejemplo esfumados, agrandamientos graduales y disoluciones, etc. - - Dos tipos de información son necesarios con el fin de realizar el ocultamiento efectivo de los errores de los cuadros que pertenecen a las transiciones de escena: 1) la información respecto a los cuadros en los cuales comienza y termina el cambio de plano; y 2) el tipo de transición de escena (corte, disolución, esfumado, agrandamiento gradual, etc.) involucrada. Ya que los dos tipos de información recién descritos no son necesarios para la descodificación correcta de los datos de la capa de codificación de video (VCL, por sus siglas en inglés) , la presente invención propone que la información relacionada a las transiciones de escenas sea proporcionada como Información de Mejoramiento Suplementaria (SEI, por sus siglas en inglés) e incluida en la corriente de bitios de vídeo codificada, como un mensaje de Información de Mejoramiento Suplementaria. Toda la información necesaria requerida para el ocultamiento de errores que ocurren en los cuadros que pertenecen a transiciones de escena, pueden ser entonces inferidos del mensaje SEI. De acuerdo a la invención, cada escena de una secuencia de vídeo está asociada con un valor identificador de escena. Los valores identificadores de escenas de escenas consecutivas difieren uno del otro y de este modo un descodificador de vídeo puede concluir que un cambio de escena ha ocurrido cuando éste recibe un identificador de escena diferente de aquel que éste previamente recibió . Los cuados en un periodo de transición de escena están asociados con dos valores identificadores de escena, una de ambas escenas en la transición. Además, las transiciones de escena graduales están asociadas con un tipo particular de transición, que puede ser la disolución, aparición gradual, desaparición gradual, agrandamiento gradual o ninguno de aquellos mencionados (por ejemplo, algún otro tipo de transición) . Esta categorización aproximada le proporciona al descodificador suficiente guía, haciendo posible que éste elija un algoritmo de ocultamiento de error adecuado para el ocultamiento de la pérdida de datos o la corrupción durante una transición de escena. De este modo, de acuerdo al primer aspecto de la presente invención, se proporciona un método para ocultar un error en un cuadro de una secuencia de vídeo, la secuencia de vídeo comprende al menos una primera escena y una segunda escena, la segunda escena tiene una transición de escena a partir de la primera escena, en donde la transición de escena comprende el número de cuadros y la transición de escena es de un número de tipos . El método comprende : la identificación del tipo de transición de escena; y la aplicación de un procedimiento de ocultamiento de error para ocultar un error en un cuadro que pertenece a la transición basada en el tipo identificado de transición de escena.
El tipo identificado de transición de escena, puede ser una escena cortada o una transición de escena gradual . Preferen emente, si una imagen completa que pertenece a la escena cortada se pierde, la imagen perdida no es ocultada. Preferentemente, si parte de una imagen que pertenece a la escena cortada se pierde o se corrompe, es aplicado un algoritmo de ocultamiento de error espacial, para ocultar la parte ' erdida o corrompida de la imagen. Preferentemente, si una imagen completa que pertenece a la transición gradual se pierde o se corrompe, es aplicado un algoritmo de ocultamiento de error espacio-temporal, para ocultar la parte perdida o corrompida de la imagen. Preferentemente, si parte de una imagen que pertenece a la transición gradual se pierde o se corrompe, es aplicado un algoritmo de ocultaniiento de errores espacio-temporal para ocultar la parte perdida o corrompida de la imagen. Preferentemente, la información indicadora de la transición de escena identificada es proporcionada a un descodificador en un mensaje de información de mejoramiento suplementario para permitir así que el descodificador oculte el error con base en dicha información. Ventajosamente, la información indicadora de la transición de escena identificada, incluye una indicación de un tipo de transición de escena, y. la información indicadora de la transición de escena identificada es proporcionada para cada cuadro que pertenece a la transición. De acuerdo al segundo aspecto de la presente invención, se proporciona un dispositivo de codificación de vídeo para codificar una secuencia de vídeo en una corriente de datos, la secuencia de vídeo comprende al menos una primera escena, y que tiene una transición de escenas a partir de la primera escena, en donde la transición de escenas comprende un número de cuadros y la transición de escenas es una de un número de tipos. El dispositivo de codificación de vídeo comprende: medios para identificar los cuadros asociados con la transición; medios para proporcionar información respecto al tipo de transición. De acuerdo al tercer aspecto de la presente invención, se proporciona un dispositivo de descodificación de vídeo para descodificar una secuencia de vídeo a partir de una corriente de datos, la secuencia de vídeo comprende al menos una primera escena y una segunda escena, y tiene una escena de transición proveniente de la primera escena, en donde la transición de escena comprende un número de cuadros y la transición de escena es una de un número de tipos. El dispositivo de codificación de vídeo comprende: medios para recibir la corriente de -datos; y un algoritmo de ocultamiento de errores para -ocultar un error en un cuadro que pertenece a la transición con base en el tipo de transición de escena. La presente invención se volverá aparente después de la lectura de la descripción tomada en conjunto con las Figuras 1 a 3. BREVE DESCRIPCION DE LAS FIGURAS La Figura 1 es un diagrama de flujo que ilustra el método de ocultamiento de errores, de acuerdo a la presente invención, que muestra cómo un método de ocultamiento de errores, apropiado, es elegido para una imagen en una transición de escena de acuerdo al tipo de la transición de escena . La Figura 2 es un diagrama de bloques que ilustra un codificador de video implementado de acuerdo a la presente invención, para proporcionar una corriente de datos codificados que incluye información indicadora de las transiciones de escena para fines de ocultamiento de errores. La Figura 3 es un diagrama de bloques que ilustra un descodificador de vídeo implementado de acuerdo con la presente invención, y correspondiente al codificador de vídeo ilustrado en la Figura 2. MEJOR MODALIDAD PARA LLEVAR A CABO LA INVENCION Como se explicó anteriormente, La Información de Mejoramiento Suplementaria (SEI) incluida en una corriente de bitios de video, codificada, contiene información que no es necesaria para descodificar correctamente los datos de video codificados, pero que es no obstante de auxilio para fines de descodificación o de presentación. De este modo, la información SEI es un vehículo ideal para llevar información respecto a la escena a la cual pertenece un cuadro particular de una secuencia de video, y para proporcionar información respecto a las transiciones de escenas. De acuerdo al estándar de codificación de vídeo ITU-T H.264/MPEG-4 parte 10 AVC , un elemento SEI contiene uno o más mensajes SEI. Cada mensaje SEI consiste de un encabezado SEI y una carga SEI. El tipo y tamaño de la carga SEI son codificados utilizando una sintaxis extensible. El tamaño de la carga SEI es indicada en bytes u octetos. Los tipos de carga SEI válidos son listados en el Anexo C del anteproyecto del comité de JVT (ver documento JVT_D015d5) . La carga SEI puede ser un encabezado de carga SEI. Por ejemplo, un encabezado de carga puede indicar la imagen a la cual pertenece el dato particular. El encabezado de carga es definido para cada tipo de carga separadamente. Las definiciones de cargas SEI, especificadas en el - Anexo C del anteproyecto del comité JVT (nuevamente ver el documento JVT_D015d5) . La transmisión de unidades SEI es sincrónica con relación a otras unidades NAL (Capa de Abstracción de Red, por sus siglas en inglés) . Un mensaje SEI puede concernir a una rebanada, una parte de una imagen, una imagen, cualquier grupo de imágenes, una secuencia en el pasado, una secuencia que es actualmente descodificada o una secuencia que va a ser descodificada en el futuro. Un mensaje SEI puede también relacionarse a una o más unidades NAL previas o siguiente en el orden de transmisión. La Tabla 1 siguiente define la sintaxis de carga SEI como se utiliza en el estándar de codificación de vídeo ITU-T H .264 /MPEG- parte 10 AVC, mientras que la Tabla 2 presenta la sintaxis particular presentada en conexión con la señalización de la información de escenas, como es propuesta de acuerdo a la presente invención.
Tabla 1 : Sintaxis de Carga SEI sei_carga (Tipo de Carga, categoría descriptor Tamaño de Carga) { si (Tipo de Carga==l) temporal_referencia (Tamaño 7 de Carga, Tamaño de Carga) incluso si (Tipo de Carga==2) reloj reloj 7 fechador (Tamaño de Carga, Tamaño de Carga) incluso si (Tipo de Carga==3 ) barrido 7 panorámico recto (Tamaño de Carga, Tamaño de Carga) incluso si (Tipo de Carga== ) escena información (Tamaño 7 de Carga, Tamaño de carga) Incluso Reservado variable si ( ! octeto alineado ( ) ) { bitio igual a uno f (1) mientras que ( !byte alineado () ) bitio igual a cero f (1) } } Tabla 2 : Sintaxis de Información de Escena SEI Los parámetros de la información de escena dados en la Tabla 2 se refiere a la siguiente unidad NAL que contiene los datos de macrobloques codificados en orden de transmisión. escena_identificador : üna escena es definida como un grupo de cuadros continuos tomados por una cámara. En general, los cuadros dentro de una escena están altamente correlacionados. De acuerdo a la invención, los cuadros en una escena dada comparten el mismo valor del parámetro de escena_identi icador y las escenas consecutivas en el orden codificado no deben tener el mismo valor del parámetro escena_identi icador . segunda_escena_identificador : - Si está presente, el parámetro segunda_escena_identificador indica que la siguiente unidad NAL que contiene el dato de macrobloque codificado pertenece a un cuadro que contiene datos de imágenes provenientes de dos escenas. ' En otras palabras, el cuadro pertenece a una transición de escena gradual. El parámetro segunda_escena_identi£icador es el identificador de escena de la última escena en el orden codificado. escena_transición_tipo : Si no está presente ningún parámetro esoena_transición_tipo en la información de escena SEI, esto indica que el tipo de transición de escena es desconocido, no definido o irrelevante. Están presentes, los valores dados en la Tabla 3 siguiente son válidos: Tabla 3 : Tipos de Transición de Escena de Acuerdo a una Modalidad Preferida de la Invención La manera en la cual se utiliza la información de escenas anteriormente descrita en el proceso descodificador para manejar la pérdida o la corrupción de datos será descrita ahora. Si una imagen completa se pierde justo antes de la actual y la escena ha cambiado desde la imagen previamente recibida, la imagen perdida no debe ser ocultada, debido a que ésta comienza una nueva escena. Si se pierde una imagen completa justo antes de la actual y ningún cambio de escena ha ocurrido desde la imagen previamente recibida, el descodificador oculta la imagen perdida. Si una imagen completa se pierde durante un periodo de transición, el descodificador utiliza el tipo de transición de escena indicado cuando se oculta la imagen perdida. Si una parte de la imagen perdida se pierde o se corrompe, y si un mensaje SEI de información de escena está asociado con la imagen, el descodificador realiza las siguientes acciones: 1) Si la escena ha cambiado desde que se recibió la imagen previa, el descodificador aplica un ocultamiento de error espacial para ocultar las partes perdidas o corrompidas de la imagen actual. 2) Si la escena no ha cambiado desde la imagen previamente recibida, el descodificador utiliza un algoritmo de ocultamiento de errores espacio temporal . 3) Si la imagen actual pertenece a una- transición de escena, el descodificador utiliza el tipo de transición de escena indicado cuando se oculta la imagen perdida. De acuerdo a la invención, un codificador debe generar mensaje SEI de información de escena si éste opera en un ambiente de transición propenso a errores, o si existe una necesidad para crear descripción de contenido de vídeo con base en la señal de video codificada. Incluso si no existe necesidad . inmediata para la descripción del contenido, puede surgir una necesidad posterior para algunos tipos de contenido de vídeo, tales como vídeo de entretenimiento. Por lo tanto, de acuerdo a la presente invención, es preferible que los codificadores siempre generen mensajes SEI de información de escenas, si es posible. En consecuencia, un codificador crea un mensaje SEI de información de escenas para cada corte de escena y transición gradual. Para cada imagen de corte de escena, existe un mensaje SEI asociado de información de escena, que puede ser repetido posteriormente para flexibilidad de error. Para cada transición de escena gradual, existe un mensaje SEI de información de escena (preferentemente repetido) asociado con la primera imagen de transición (por ejemplo, la primera imagen que está compuesta del tránsito desde y el tránsito hacia escena) . Para cada transición de escena gradual, existe también un mensaje SEI de información de escena (preferentemente repetido) asociado con la - primera imagen después de la última imagen de transición (la última imagen de transición se refiere a la última imagen que está compuesta el tránsito desde y el tránsito hacia la escena) . Como se mencionó anteriormente, el valor del parámetro escena_identificador es diferente en escenas consecutivas. En un ambiente de transporte orientado por paquetes, el empaquetador de transportes duplica cada mensaje SEI de información de escena al menos en dos paquetes, si es posible, con el fin de garantizar la recepción correcta de al menos una ocurrencia del mensaje. En el transporte RTP, el empaquetador utiliza paquetes compuestos para asociar un mensaje SEI de información de escena a los contenidos de imagen codificados . En un ambiente de transporte orientado i por corrientes de octetos, cada mensaje SEI de información de escena es al menos duplicado. El método de ocultamiento de errores en las secuencias de vídeo por señalización de los cambios de plano, de acuerdo a la presente invención, se ilustra en el diagrama de flujo 100 en la Figura 1. Cuando el descodificador encuentra pérdida o corrupción de datos en el proceso de descodificación, el descodificador decide en el paso 110 si la imagen perdida o corrompida es una imagen completa o una parte de una imagen. Si la imagen completa ha sido perdida, el descodificador determina qué tipo de situación de pérdida -está ocurriendo (paso 120) . Si una imagen completa se perdió justo antes de la actual y la escena ha cambiado desde la imagen previamente recibida (por ejemplo, como es indicado por el valor del parámetro escena_identificador en la información SEI recibida) , la imagen perdida no debe ser ocultada debido a que en este caso, como se explicó anteriormente, la imagen perdida representa el inicio de una nueva escena (paso 124) . Si una imagen completa se perdió justo antes de la actual y ningún cambio de escena ocurrió desde la imagen previamente recibida, el descodificador oculta la imagen perdida, como se muestra en el paso 122. Si una imagen completa se perdió durante un periodo de transición, el descodificador utiliza el tipo de transición de escena indicada (obtenido a partir de la información SEI recibida) cuando se oculta la imagen perdida, como se muestra en el paso 126. Si una imagen parcial ha sido perdida, el descodificador determina qué tipo de situación de pérdida está ocurriendo (paso 130) . Si una parte de la imagen actual se perdió o se corrompió, y si un mensaje SEI de información de escena está asociado con la imagen, el descodificador debe realizar las siguientes acciones: Si la escena ha cambiado desde la imagen previamente recibida, el descodificador aplica un algoritmo de ocultamiento de errores parcial para ocultar las partes pérdidas o corrompidas de la imagen actual, como se muestra en el paso 134. Si -la escena no ha cambiado desde la imagen previamente recibida, el descodificador utiliza un algoritmo de ocultamiento de error espacio-temporal, como se muestra en el paso 132. Si la imagen actual pertenece a una transición de escena, el descodificador utiliza el tipo de transición de escena indicada cuando se oculta la imagen perdida, como se muestra en el paso 136. Con el fin de llevar a cabo el método de ocultamiento de error como se ilustra en el diagrama de flujo 100 de la Figura 1, un codificador de vídeo implementado de acuerdo a la invención debe ser capaz de monitorizar los cambios de escenas y transferir la información indicadora de los cambios de escena en la corriente de bitios generados por el codificador. Un diagrama de bloques de tal codificador de vídeo 200 se muestra en la Figura 2. Como se muestra en la Figura, un codificador de vídeo implementado de acuerdo con la presente invención incluye un monitor 210 de transición de escenas, una máquina de codificación 220, una unidad de control 230 y una unidad multiplexora/empaquetadora 240. Una señal de entrada de vídeo representativa de una secuencia de vídeo, es aplicada a una terminal de entrada del codificador de vídeo y alimentada vía un monitor de transición de escena 210 a la máquina 220 de codificación de vídeo, donde los cuadros individuales de la secuencia de vídeo son codificados, por ejemplo INTRA- o INTER-formato . El monitor de transición de escenas examina ..los cuadros, por ejemplo, mediante el cálculo de una suma acumulativa de las diferencias absolutas entre los pixeles en los cuadros consecutivos de la secuencia, o mediante la aplicación de cualquier otro método de detección de escena conocido de la técnica anterior, con el fin de identificar las diversas escenas que constituyen la secuencia de vídeo. El monitor 210 de transición de escena proporciona una indicación de la escena a la cual pertenece cada cuadro, hacia la unidad de control 230. Cuando se detecta una transición entre las escenas (por ejemplo, un corte de escena, esfumado, disolución, agrandamiento gradual, etc.), el monitor 210 de transmisión de escena proporciona también una indicación del tipo de transición a la unidad de control 230. La unidad de control asigna un identificador (por ejemplo, un número) a cada escena identificada por el monitor de transición de escenas, y asocia el identificador con cada cuadro que es identificado como perteneciente a la escena en cuestión. Además, cuando se detecta una transición de escena, la unidad de control 230 incluye a la máquina 220 de codificación de vídeo a codificar el primer cuadro de la nueva escena en el formato INTRA-codificado . Ventajosamente, todos los cuadros subsecuentes que pertenecen a la nueva escena son entonces codificados en el formato INTER-codificado a no ser que se vuelva necesario codificar un cuadro dado en otro formato por alguna razón. En una modalidad preferida de la invención, la unidad de control 230 asocia Información de Mejoramiento Suplementario (información SEI) con cada cuadro que pertenece a una transición de escena, y pasa la información SEI al multiplexor/empaquetador 240. Ventajosamente, la información SEI para los cuadros que forman parte de una transición de escena es formada como se describió previamente en la Mejor Modalidad para Llevar a Cabo la Invención, presentada al principio en el texto. El multiplexor/empaquetador también recibe los datos de vídeo codificador prevenientes de la iraquina 220 de codificación de vídeo y forma una corriente de bitios simple a partir de un dato de vídeo codificado y la información SEI. La corriente de bitios es luego transmitida, por ejemplo a un descodificador de vídeo correspondiente (ver Figura 3) vía un canal de transmisión o hacia un dispositivo de almacenamiento (no mostrado) para la posterior recuperación y observación. La Figura 3 es un diagrama de bloques que muestra un codificador de vídeo 300 implementado de acuerdo con la presente invención, y correspondiente al codificador de vídeo descrito en conexión con la Figura 2. Como se puede observar a partir de la Figura 3f el descodificador de vídeo de acuerdo a la invención incluye un desempaquetador/desmultiplexor 310, una unidad de control 320, una unidad 330 de ocultamiento de errores y una máquina 340 de descodificación de vídeo. El deseri aquetador/desmultiplexor recibe una corriente de bitios codificada, representativa de una secuencia de vídeo en la forma de paquetes de datos a partir de un canal de transición. Este reconstruye la corriente de bitios de vídeo codificada a partir de los paquetes de datos recibidos, y separa la corriente de bitios de vídeo en sus partes correspondiente (por ejemplo, en diferentes tipos de información con relación a los cuadros de vídeo codificados de la secuencia) . De acuerdo a la invención, el desempaquetador/desmultiplexor extrae la Información de Mejoramiento Suplementaria que contiene, entre otras cosas, la información relacionada a las transiciones de escenas provenientes de la corriente de bitios de vídeo codificada, y pasa la información SEI a la unidad de control 320. Los datos necesarios para la descodificación de los cuadros de vídeo codificados, es pasada desde el desempaquetador/desmultiplexor 310 hacia la máquina 340 de descodificación de vídeo, donde los cuadros individuales de la secuencia de vídeo son reconstruidos utilizando, por ejemplo, las técnicas de descodificación INTRA e INTER. Conforme cada cuadro es descodificado, la máquina 340 de descodificación de vídeo examina los datos de vídeo recibidos para los errores que pueden haber sido introducidos durante la transmisión de la corriente de bitios de vídeo codificado sobre el canal de transmisión desde el codificador. Si la máquina de descodificación de vídeo detecta que un cuadro particular contiene tales errores, o el cuadro está tan malamente corrompido que éste no puede ser descodificado del todo (por ejemplo el cuadro es efectivamente perdido) , éste intenta ocultar el error o el cuadro completo utilizando un algoritmo apropiado de ocultamiento de errores . De acuerdo a la presente invención, la elección de un método apropiado de ocultamiento de errores es realizado por la unidad 330 de ocultamiento de errores. La unidad de ocultamiento de errores recibe la información respecto a la escena a la cual pertenece cada cuadro, desde la unidad de control 320. En el caso de cuadros que son parte de una transición de escena, la unidad de control 320 pasa también la información relacionada al tipo de transición de escena a la unidad de ocultamiento de errores. De este modo, cuando la máquina de descodificación 340 detecta un error que afecta un cuadro que es parte de una transición de escena, la unidad 330 de ocultamiento de errores es capaz de elegir un método adecuado para ocultar el error por la consideración de la escena a la cual pertenece el cuadro, y tomando en cuenta el tipo de transición de escena. Preferentemente, en la realización de esta elección, la unidad 330 de ocultamiento de errores aplica el método de selección descrito en la Mejor Modalidad para Llevar a Cabo la Invención anteriormente presentada. La máquina 340 de descodificación de vídeo oculta luego el error en el cuadro utilizando el algoritmo de ocultamiento de error, seleccionado, y envía de salida el cuadro descodificado, por ejemplo, para la exhibición sobre un dispositivo de pantalla (no mostrado) .
Con el fin de verificar la ineficacia de los métodos de ocultamiento de errores para los cuadros de corte de escena y de transición de escena de acuerdo con la invención, fueron realizados una serie de experimentos de simulación utilizando un codificador y un descodificador de vídeo implementados de acuerdo al estándar de codificación de vídeo ITU-T H.264/MPEG-4 parte 10 AVC, modificado con el fin de operar de acuerdo con el método de la presente invención. Estos experimentos de simulación son detallados más adelante. A. Simulaciones en el Ocultamiento de Errores de los Cuadros de Acceso Aleatorios y Cortes de Escena En esta simulación, las secuencias y las velocidades de bitios propuestas en el documento VCEG-N79rl fueron utilizadas y fueron aplicadas las condiciones comunes para los ambientes de pérdida de paquetes (como se define en VCEG-N79rl) . Además, con el fin de simular los efectos del ocultamiento de errores para cuadros de corte de escena, una secuencia artificial de 30 cuadros con cortes de escena regulares se construyó a partir de las secuencias bien conocidas wNe" , "Foreman", "Coastguard" , "Carphone" y "Silent" . En lo subsiguiente, esta secuencia artificial es denominada como MixedSeq" . Un periodo INTRA-cuadro de aproximadamente 1 segundo se utilizó para hacer posible el acceso aleatorio frecuente en todos los casos . Para MixedSeq, tal periodo INTRA provocó que todos los cortes de escena fueran INTRA codificados. Se utilizó también la utilización de advertencia de pérdida R/D (LA-RDO) . Los otros parámetros de codificación utilizados para codificar las secuencias se muestran enseguida en la Tabla . Tabla 4: Parámetros del Codificador Utilizados en la Simulación de Ocultamiento de Errores en los Cuadros de Acceso Aleatorio y Cortes de Escena Modo de corriente de bitios: RTP Resolución de vector de movimiento: 1/4 peí Transformación de Hadamard: Utilizada Intervalo de búsqueda máxima: 16 Número de cuadros previos 5 utilizados para la búsqueda de movimiento INTER Tipos de bloques habilitados: Todos Modo de división: Tamaño fijo, 1400 octetos/rebanada Cuados B y cuados SP No utilizados Modo de símbolo: ÜVLC Partición de datos: 1 partición por rebanada Encabezado de secuencia: Sin encabezado de secuencia Restricciones de intervalo de Ninguna búsqueda: Predicción INTRA constreñida: Utilizada Cuadros de referencia restringidos: Utilizados Número de descodíficadores para LA30 RDO: Ocultamiento de Errores La creación de los mensajes SEI de información de escenas en el codificador de acuerdo a los métodos de la invención es simulada de acuerdo a los lineamientos presentados en la Mejor Modalidad para Llevar a Cabo la Invención, descrita anteriormente, y fueron comparados dos procesos descodificadores : 1. El descodificador del Joint Model estándar, incluyendo el método de ocultamiento de error descrito en el Apéndice del Anteproyecto de Trabajo de JVT (ver documento JVT-C039) . 2. El descodificador Joint Model mejorado con el proceso descodificador de acuerdo a la presente invención. Velocidad de bitios y Cálculo de PSNR Como se estableció en las condiciones comunes especificadas en el documento VCEG-N79rl, los parámetros de codificación tales como el parámetro de cuantificación fueron elegidos para hacer la velocidad de bitios resultante tan cercana como fuera posible a la velocidad de bitios de canal, tomando en cuenta los 40 bitios de los encabezados IP/UDP/RTP por paquete. Los valores PSNR fueron calculados utilizando cada cuadro en la secuencia de la fuente incluyendo los cuadros saltados y perdidos . Para reducir el efecto impuesto sobre el resultado total por los primeros cuadros (los primeros cuadros codificados tienen un tamaño promedio más grande que el tamaño promedio de la secuencia completa) , la velocidad de bitios y el valor PSN promedio fueron calculados a partir de los' sextos cuadros codificados. Este método permite que sean codificadas secuencias cortas con resultados claros. En vez de codificar 4000 cuadros, 300-400 cuadros de cada secuencia designada fueron utilizados, para asegurar que al menos 100 cuadros fueran codificados y al menos 300 cuadros fueran utilizados. Simulación de Pérdida de Paquetes En la simulación, se asumió que el paquete que contiene el grupo de parámetros (Tabla 4) fue transferido confiablemente (por ejemplo, por fuera de banda durante el ajuste de la sesión) , y por lo tanto no fue leído ningún patrón de error para éste a partir de un archivo de patrones de errores . Al menos un paquete del primer cuadro debe ser recibido para evitar el fracaso del descodificador. Para satisfacer esta condición, el primer paquete del primer cuadro fue siempre recibido no obstante del patrón de error correspondiente . Corrida de Descodificación Representativa La corriente de bitios codificada fue descodificada múltiples veces (cada una siendo denominada como una corrida de descodificación) . La posición de pérdida inicial de la corrida con orden n+1 sigue continuamente la posición de pérdida final de la enésima corrida. El número de corridas de descodificación fue seleccionado de modo que existieron al menos 8000 paquetes en total. El PSNR promedio completo fue obtenido mediante el promedio de los valores de PSNR promediados de todas las corridas de descodificación. La corrida de descodificación representativa fue seleccionada de modo que su PSNR promedio fuera el más cercano al PSNR promedio total . Los valores de PSNR instantáneos y la secuencia descodificada de la corrida representativa, fueron almacenados para tratar las gráficas de PSNR instantáneas y para la evaluación de calidad subjetiva. Resultados Como se muestra por los resultados de simulación para MixedSeq@144 kbps, presentados en la Tabla 11 siguiente, el uso del ocultamiento de error INTRA para cortes de escenas, proporciona mejor funcionamiento en términos de calidad objetiva y subjetiva que el uso del ocultamiento de errores INTER. De manera contraria, el uso del ocultamiento de errores INTER es consistentemente mejor que el uso de ocultamiento de errores INTRA para los cuadros que no son cortes de escena, como se puede observar a partir de los otros seis casos de codificación presentados en las Tablas 5 y 10. Esto demuestra la utilidad de la presente invención.
Tabla 5: Secuencia "Poreman" Codificada a 64 kbps, 7.5 cuadros/segundo Tabla 6 : Secuencia "Foreman" Codificada a 144 kbps , 7.5 cuadros/segundo Velocidad Velocidad de Pérdida de Paquete Algoritmo de Bitios QP (%) Resultante 0 3 5 10 20 Descodificador 143.54 18 26.78 26.19 25.88 24.97 23.61 Estándar Joint Model con Métodos de Ocultamiento de Errores del Apéndice D Método de Acuerdo a 143.54 18 26.78 26.43 26.16 25.53 24.57 la Invención Tabla 7: Secuencia "Hall" Codificada a 32 kbps , 10 cuadros/segundo Tabla 8: Secuencia "Irene" Codificada a 384 kbps, 30 cuadros/segundo Velocidad Velocidad de Pérdida de Paquete (%) Algoritmo de Bitios QP 0 3 5 10 20 Resultante Descodificador 334.96 22 34.99 34.09 33.40 31.35 28.79 Estándar Joint Model con Métodos de Ocultamiento de Errores del Apéndice D Método de Acuerdo a la 334.96 22 34.99 34.62 34.32 33.58 32.35 Invención Tabla 9: Secuencia "Paris" Codificada a 144 kbps, 15 cuadros/segundo Tabla 10: Secuencia "Paris" Codificada a 384 kbps, 15 cuadros/segundo Velocidad Velocidad de Pérdida de Paquete (%) Algoritmo de Bitios QP 0 3 5 10 20 Resultante Descodificador 355.32 22 29.56 27.75 26.95 24.06 21.54 Estándar Joint Model con Métodos de Ocultamiento de Errores del Apéndice D Método de Acuerdo a 355.32 22 29.56 29.20 28.92 28.33 27.34 la Invención Tabla 11: Secuencia " ixedSeq" Codificada a 144 kbps, 15 cuadros/segundo B. Simulaciones en el Ocultamiento de Errores de Esfumados Con el fin de simular los efectos del ocultamiento de errores para los cuadros de desaparición gradual y aparición gradual, dos secuencias artificiales con 10 cuadros de desaparición gradual, 10 cuadros de aparición gradual y 10 cuadros normales fueron producidos. Uno fue realizado a partir de una combinación de "News" y "Akiyo" (con bajo movimiento), el otro fue realizado a partir de "Carphone" y "Foreman" (con movimiento moderado) . Después de la codificación utilizando el codificador Joint Model de JVT y un patrón de codificación I-P-P-P, la pérdida de algunos cuadros de esfumado fue simulada y las corrientes de bitios -disipativas se alimentaron al descodificador . Fueron utilizados dos diferentes métodos de ocultamiento de errores para ocultar errores introducidos por la pérdida de los cuadros de esfumado : 1. El método de ocultamiento de errores convencional en el codificador JVT (como se describe en el Apéndice D del Anteproyecto de Trabajo de JVT (JVT-C039) ) ; y 2. El método especial de ocultamiento de errores para esfumados de acuerdo a la invención, como se describe más adelante. Método de Ocultamiento de Errores Un cuadro faltante en un esfumado es ocultado mediante el copiado y el cambio de escala de los valores de píxel del cuadro previo. No obstante, si existe únicamente un cuadro previo en el periodo de transición de escenas, no se lleva a cabo ningún escalamiento. Si Mn' es el valor promedio del píxel Y (luminancia) del cuadro previo y Mn'' es el valor promedio del píxel Y del cuadro antes del cuadro previo, el factor de escalado f es como sigue: F= (2*??' -Mn' ' ) /Mn' Los valores Y, U y V ocultados para el píxel {Ys, Os, Vs) son calculados a partir de los valores espacialmente correspondientes del cuadro previo {Y, U, V) como sigue: Ys=f*y Us=f* (U-128) +128 - · Vs=f* (V-128) +128 Como se muestra por los resultados de la simulación, utilizando el método especial de ocultamiento de errores para los esfumados, de acuerdo a la presente invención, se proporciona funcionamiento significativamente menor en la calidad objetiva y subjetiva que el método convencional de ocultamiento de errores definido en el Apéndice D de la recomendación de codificación de vídeo de JVT . Se puede argüir que la calidad visual de una transición de escena gradual no es importante. No obstante, el mal ocultamiento de errores durante una transición de escenas no solamente da como resultado cuadros de transición de mala calidad, sino que también conduce a cuadros normales de mala calidad después de la transición de la escena, debido a la propagación de errores temporales. Ocultamiento de Errores de las Disoluciones Enseguida se presentan dos métodos para el ocultamiento de errores de un cuadro perdido durante una disolución. Si el descodificador es capaz de guardar temporalmente un número suficiente de cuadros antes de la descodificación, debe ser utilizado el algoritmo A. De otro modo, el algoritmo B debe ser utilizado.
Algoritmo A: Si la memoria intermedia del pre-codificador contiene cualquier cuadro INTRA-codificado de la segunda escena (un cuadro después del periodo de transición) , el INTRA-cuadro es utilizado como el segundo cuadro de ancla en el ocultamiento de errores. Si no está disponible tal INTRA-cuadro, tiene que ser utilizado el algoritmo B. El primer cuadro de ancla es el último cuadro reconstruido. Si dtl es a distancia temporal entre el primer cuadro de ancla y el cuadro faltante en el tiempo de presentación y dt2 es la misma medición con respecto al segundo cuadro de ancla, respectivamente (yl, ul , vi) es un pixel en el primer cuadro de ancla e (y2 , u2 , v2) es el píxel espacialmente correspondiente en el segundo cuadro de ancla, un píxel ocultado (y, u, v) es luego dado por: Y=clipl ( (yl*dt2+y2*dtl) / (dt2+dtl) ) . donde u y v son calculados similarmente pero su signo es tomado en cuenta: u=clipl ( (ul-128) *dt2+ (u2-128) *dtl) / (dt2+dtl) +128) donde la función matemática "clipl" (trozo 1) es definida como sigue : clipl(c) =clip3 (0,255, c) clip3(a,b,c) =a si c<a =b si. ob, o · ¦ =c de otro modo . Algoritmo B: Ocultamiento normal de error espacio-temporal . Ocultamiento de Errores de los Agrandamientos Graduales El descodificador tiene que detectar: 1. la forma del o de los límites entre las dos escenas involucradas en el agrandamiento gradual; Y 2. la velocidad que define qué tan rápida es cubierta la escena final por la escena inicial . La detección puede ser realizada mediante la comparación de las imágenes reconstruidas, por ejemplo, y calculando una correlación bloque por bloque. Dos bloques espacialmente correspondientes provenientes de imágenes temporalmente subsecuentes son correlacionados, éstos son de la misma escena. De otro modo éstos son de diferentes escenas. Con base en la forma y velocidad estimada, el descodificador puede calcular una predicción en la localización y la forma del límite en una imagen o área faltante. Las áreas faltantes que pertenecían a la escena final en la imagen previa y son estimadas como pertenecientes a la escena final en una imagen/área perdida, pueden ser ocultadas por el copiado de las áreas a partir de la imagen previa.
Similarmente , las áreas faltantes que pertenecían a la escena inicial en la imagen previa son estimadas como pertenecientes a la escena inicial en una imagen/área perdida, pueden ser ocultadas mediante el copiado de las áreas a partir de la imagen previa. Las áreas faltantes que pertenecían a la escena final en la imagen previa y son estimadas como pertenecientes a la escena inicial en la imagen/área perdida deben ser ocultadas espacialmente de los contenidos adyacentes de la imagen inicial . Cuando se ocultan áreas faltantes, el acoplamiento de ¦ los límites a los bloques adyacentes correctamente reconstruidos, pueden ser utilizados como es realizado frecuentemente en el ocultamiento de errores . Ocultamiento de Errores de Otros Tipos de Transición Debe ser utilizado el método de ocultamiento de errores espacio- temporal normal. Aunque la invención ha sido descrita con respecto a una modalidad preferida de la misma,. odrá ser comprendido por aquellos expertos en la técnica que los anteriores y otros diversos cambios, omisiones y desviaciones en la forma y detalle de la misma pueden ser realizados sin apartarse del alcance de esta invención. ¦ · Se hace constar que con relación a esta fecha, el mejor método conocido por la solicitante para llevar a la práctica la citada invención, es el que resulta claro de la presente descripción de la invención.

Claims (22)

REIVINDICACIONES Habiéndose descrito la invención como antecede, se reclama como propiedad lo contenido en las siguientes reivindicaciones :
1. Un método para ocultar un error en un cuadro de una secuencia de vídeo, la secuencia de vídeo comprende al menos una primera escena y una segunda escena, la segunda escena tiene una transición de escena a partir de la primera escena, en donde la transición de escena comprende un número de cuadros y la transición de escena es una de un número de tipos, el método está caracterizado porque comprende : la identificación del tipo de transición de escena; y la aplicación de un procedimiento de ocultamiento de errores para ocultar un error en un cuadro perteneciente a la transición con base en el tipo identificado de transición de escena.
2. Un método de conformidad con la reivindicación 1, caracterizado porque el tipo identificado de transición de escena es un corte de escena .
3. Un método de conformidad con la reivindicación 2, caracterizado porque si una imagen completa que pertenece al corte de escena se pierde, la imagen perdida no es ocultada.
4. Un método de conformidad con la reivindicación 2, caracterizado porque si la parte de una imagen perteneciente al corte de escena se pierde o se corrompe, es aplicado un algoritmo de ocultamiento de error espacial para ocultar la parte perdida o corrompida de la imagen.
5. Un método de conformidad con la reivindicación 1, caracterizado porque el tipo identificado de transición de escena es una transición de escena gradual .
6. Un método de conformidad con la reivindicación 5, caracterizado porque la transición de escena es un esfumado.
7. Un método de conformidad con la reivindicación 5, caracterizado porque la transición de escena es una disolución.
8. Un método de conformidad con la reivindicación 5, caracterizado porque la transición de escena es un agrandamient o gradual .
9. Un método de conformidad con la reivindicación 5, caracterizado porque -si una imagen completa perteneciente a la transición gradual se pierde o corrompe, es aplicado un algoritmo de ocultamiento de error espacio- temporal para ocultar la parte perdida o corrompida de la imagen.
10. Un método de conformidad con la reivindicación 5, caracterizado porque si una parte de una imagen perteneciente a la transición gradual se pierde o se corrompe, es aplicado un algoritmo de ocultamiento de error espacio- temporal para ocultar la parte perdida o corrompida de la imagen.
11. Un método de conformidad con la reivindicación 1, caracterizado porque la información indicadora de la transición de escena identificada es proporcionada a un descodificador en un mensaje de información de mejoramiento suplement rio, para permitir que el descodificador oculte el error con base en dicha información.
12. Un método de conformidad con la reivindicación 11, caracterizado porque la información indicadora de la transición de escena identificada incluye una indicación de un tipo de transición de escena.
13. Un método de conformidad con la reivindicación 11, caracterizado porque la información indicadora de la transición de escena identificada es proporcionada para cada cuadro perteneciente a la transición.
14. Un dispositivo de codificación de vídeo para codificar una secuencia de vídeo en una corriente de datos, la secuencia de vídeo comprende al menos una primera escena y una segunda escena y tiene una transición de escena a partir de la primera escena, en donde la transición de escena comprende un número de cuadros y la transición de escena es una de un número de tipos, el dispositivo de codificación de vídeo está caracterizado porque comprende: medios para identificar los cuadros asociados con la transición; medios para proporcionar información respecto al tipo de transición.
15. Un dispositivo de codificación de vídeo de conformidad con la reivindicación 14, caracterizado porque es proporcionada información en un mensaje de información de mejoramiento suplementario.
16. Un dispositivo de codificación de vídeo de conformidad con la reivindicación 15, caracterizado porque es proporcionada la información para cada cuadro perteneciente a la transición.
17. Un dispositivo de codificación de vídeo para descodificar una secuencia de vídeo a partir de una corriente de datos, la secuencia de vídeo comprende al menos una primera escena y una segunda escena, que tiene una transición de escena a partir de la primera escena, en donde la transición de escena comprende un número de cuadros y la transición de escena es una de un número de tipos, el dispositivo de codificación de vídeo está caracterizado porque comprende: medios para recibir la corriente de datos; y un algoritmo de ocultamiento de errores para ocultar un error en un cuadro perteneciente a la transición, con base en el tipo de transición de escena .
18. Un dispositivo de descodificación de vídeo de conformidad con la reivindicación 17, caracterizado porque el tipo de transición de escena es indicado en una información de mejoramiento suplementario proporcionada al dispositivo de codificación de vídeo.
19. Un dispositivo de descodificación de vídeo de conformidad con la reivindicación 17, caracterizado porque el tipo de transición de escena es una transición de escena gradual y una imagen completa perteneciente a la transición de escena gradual es perdida o corrompida, el algoritmo de ocultamiento de error comprende un algoritmo de ocultamiento de error espacio- temporal para ocultar la imagen perdida o corrompida.
20. Un dispositivo de descodificación de video de conformidad con la reivindicación 17, caracterizado porque el tipo de transición de escena es una transición de escena gradual y una parte de una imagen perteneciente a la transición de escena gradual es perdida o corrompida, el algoritmo de ocultamiento de errores comprende un algoritmo de ocultamiento de error espacio - t emporal para ocultar la parte perdida o corrompida de la imagen.
21. Un dispositivo de descodificación de vídeo de conformidad con la reivindicación 17, caracterizado porque el tipo de transición de escena es un corte de escena y una parte de una imagen perteneciente al corte de escena, se pierde o se corrompe, el algoritmo de ocultamiento de errores comprende un algoritmo de ocultamiento de error espacial para ocultar el error en la imagen.
22. Un dispositivo de descodificación de vídeo de conformidad con la reivindicación 17, caracterizado porque el tipo de transición de escena es un corte de escena y . una imagen completa perteneciente al corte de escena se pierde o se corrompe, el algoritmo de ocul tamiento de errores está adaptado para ignorar la imagen perdida o corrompida.
MXPA05000559A 2002-07-15 2003-07-15 Metodo para ocultamiento de errores en secuencias de video. MXPA05000559A (es)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US39648902P 2002-07-15 2002-07-15
PCT/IB2003/002802 WO2004008733A2 (en) 2002-07-15 2003-07-15 Method for error concealment in video sequences

Publications (1)

Publication Number Publication Date
MXPA05000559A true MXPA05000559A (es) 2005-04-19

Family

ID=30116033

Family Applications (1)

Application Number Title Priority Date Filing Date
MXPA05000559A MXPA05000559A (es) 2002-07-15 2003-07-15 Metodo para ocultamiento de errores en secuencias de video.

Country Status (9)

Country Link
US (1) US8107539B2 (es)
EP (1) EP1535467B1 (es)
JP (1) JP4373329B2 (es)
KR (1) KR101075860B1 (es)
CN (2) CN1669322A (es)
AU (1) AU2003281127B2 (es)
MX (1) MXPA05000559A (es)
RU (1) RU2321967C2 (es)
WO (1) WO2004008733A2 (es)

Families Citing this family (83)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7003035B2 (en) 2002-01-25 2006-02-21 Microsoft Corporation Video coding methods and apparatuses
US20040001546A1 (en) 2002-06-03 2004-01-01 Alexandros Tourapis Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation
US7154952B2 (en) 2002-07-19 2006-12-26 Microsoft Corporation Timestamp-independent motion vector prediction for predictive (P) and bidirectionally predictive (B) pictures
US7748020B2 (en) * 2002-10-08 2010-06-29 Canon Kabushiki Kaisha Receiving apparatus and method for processing interruptions in streaming broadcasts
US8824553B2 (en) 2003-05-12 2014-09-02 Google Inc. Video compression method
US7609763B2 (en) * 2003-07-18 2009-10-27 Microsoft Corporation Advanced bi-directional predictive coding of video frames
US8064520B2 (en) 2003-09-07 2011-11-22 Microsoft Corporation Advanced bi-directional predictive coding of interlaced video
KR100991619B1 (ko) * 2003-09-17 2010-11-04 엘지전자 주식회사 내용 기반 트릭 플레이를 위한 방송 서비스 방법 및 시스템
US8010652B2 (en) * 2004-05-07 2011-08-30 Nokia Corporation Refined quality feedback in streaming services
CN1302668C (zh) * 2004-05-20 2007-02-28 复旦大学 一种隐藏错误的视频译码方法
KR100677548B1 (ko) * 2004-12-31 2007-02-02 삼성전자주식회사 복호된 영상의 오류 재은닉 방법 및 그 장치
FR2880462A1 (fr) * 2005-01-06 2006-07-07 Thomson Licensing Sa Procede de reproduction de documents comprenant des sequences alterees et, dispositif de reproduction associe
GB0500332D0 (en) * 2005-01-08 2005-02-16 Univ Bristol Enhanced error concealment
US8548055B2 (en) * 2005-03-10 2013-10-01 Qualcomm Incorporated Encoding of multimedia data
EP1869891A4 (en) * 2005-04-13 2014-06-11 CODING, STORAGE AND SIGNALING OF SCALABILITY INFORMATION
US8155189B2 (en) 2005-10-19 2012-04-10 Freescale Semiconductor, Inc. System and method of coding mode decision for video encoding
US7916796B2 (en) * 2005-10-19 2011-03-29 Freescale Semiconductor, Inc. Region clustering based error concealment for video data
US9479794B2 (en) 2005-11-10 2016-10-25 Freescale Semiconductor, Inc. Resource efficient video processing via prediction error computational adjustments
WO2007067271A2 (en) * 2005-12-07 2007-06-14 Thomson Licensing Method and apparatus for video error concealment using reference frame selection rules
US7827467B2 (en) * 2006-01-04 2010-11-02 Nokia Corporation Method for checking of video encoder and decoder state integrity
US7693219B2 (en) * 2006-01-04 2010-04-06 Freescale Semiconductor, Inc. System and method for fast motion estimation
FR2898459B1 (fr) * 2006-03-08 2008-09-05 Canon Kk Procede et dispositif de reception d'images ayant subi des pertes en cours de transmission
CN101427578A (zh) * 2006-04-21 2009-05-06 夏普株式会社 数据发送装置、数据发送方法、视听环境控制装置、视听环境控制系统、及视听环境控制方法
US8798172B2 (en) * 2006-05-16 2014-08-05 Samsung Electronics Co., Ltd. Method and apparatus to conceal error in decoded audio signal
KR101261528B1 (ko) * 2006-05-16 2013-05-07 삼성전자주식회사 복호화된 오디오 신호의 오류 은폐 방법 및 장치
US8699583B2 (en) * 2006-07-11 2014-04-15 Nokia Corporation Scalable video coding and decoding
US9883202B2 (en) * 2006-10-06 2018-01-30 Nxp Usa, Inc. Scaling video processing complexity based on power savings factor
US8509313B2 (en) * 2006-10-10 2013-08-13 Texas Instruments Incorporated Video error concealment
US8873932B2 (en) 2007-12-11 2014-10-28 Cisco Technology, Inc. Inferential processing to ascertain plural levels of picture interdependencies
US8875199B2 (en) 2006-11-13 2014-10-28 Cisco Technology, Inc. Indicating picture usefulness for playback optimization
US20090180546A1 (en) 2008-01-09 2009-07-16 Rodriguez Arturo A Assistance for processing pictures in concatenated video streams
US8416859B2 (en) 2006-11-13 2013-04-09 Cisco Technology, Inc. Signalling and extraction in compressed video of pictures belonging to interdependency tiers
EP2129136A4 (en) * 2007-01-31 2016-04-13 Nec Corp IMAGE QUALITY EVALUATION PROCESS, IMAGE QUALITY EVALUATION DEVICE AND IMAGE QUALITY EVALUATION PROGRAM
JP2008283253A (ja) * 2007-05-08 2008-11-20 Sharp Corp 画像伝送システム、画像符号化装置、画像復号装置
US8254455B2 (en) 2007-06-30 2012-08-28 Microsoft Corporation Computing collocated macroblock information for direct mode macroblocks
CN101355708B (zh) * 2007-07-25 2011-03-16 中兴通讯股份有限公司 一种自适应误码掩盖方法
US8804845B2 (en) 2007-07-31 2014-08-12 Cisco Technology, Inc. Non-enhancing media redundancy coding for mitigating transmission impairments
US8958486B2 (en) 2007-07-31 2015-02-17 Cisco Technology, Inc. Simultaneous processing of media and redundancy streams for mitigating impairments
KR101487771B1 (ko) * 2007-08-10 2015-01-30 삼성전자주식회사 이동통신 시스템에서 영상 정보를 복구하기 위한 방법 및장치
US8121189B2 (en) * 2007-09-20 2012-02-21 Microsoft Corporation Video decoding using created reference pictures
US9357233B2 (en) * 2008-02-26 2016-05-31 Qualcomm Incorporated Video decoder error handling
US8416858B2 (en) 2008-02-29 2013-04-09 Cisco Technology, Inc. Signalling picture encoding schemes and associated picture properties
US9848209B2 (en) * 2008-04-02 2017-12-19 Microsoft Technology Licensing, Llc Adaptive error detection for MPEG-2 error concealment
US8886022B2 (en) 2008-06-12 2014-11-11 Cisco Technology, Inc. Picture interdependencies signals in context of MMCO to assist stream manipulation
US8705631B2 (en) 2008-06-17 2014-04-22 Cisco Technology, Inc. Time-shifted transport of multi-latticed video for resiliency from burst-error effects
US8699578B2 (en) 2008-06-17 2014-04-15 Cisco Technology, Inc. Methods and systems for processing multi-latticed video streams
US8971402B2 (en) 2008-06-17 2015-03-03 Cisco Technology, Inc. Processing of impaired and incomplete multi-latticed video streams
US9788018B2 (en) * 2008-06-30 2017-10-10 Microsoft Technology Licensing, Llc Error concealment techniques in video decoding
US9924184B2 (en) * 2008-06-30 2018-03-20 Microsoft Technology Licensing, Llc Error detection, protection and recovery for video decoding
US20100037281A1 (en) * 2008-08-05 2010-02-11 Broadcom Corporation Missing frame generation with time shifting and tonal adjustments
US8451907B2 (en) * 2008-09-02 2013-05-28 At&T Intellectual Property I, L.P. Methods and apparatus to detect transport faults in media presentation systems
CN102210147B (zh) * 2008-11-12 2014-07-02 思科技术公司 处理具有[aar]单个视频信号的多个处理后的表示的视频[aar]节目以用于重建和输出
US9131241B2 (en) * 2008-11-25 2015-09-08 Microsoft Technology Licensing, Llc Adjusting hardware acceleration for video playback based on error detection
US8189666B2 (en) 2009-02-02 2012-05-29 Microsoft Corporation Local picture identifier and computation of co-located information
US20100231797A1 (en) * 2009-03-10 2010-09-16 Broadcom Corporation Video transition assisted error recovery for video data delivery
US8949883B2 (en) 2009-05-12 2015-02-03 Cisco Technology, Inc. Signalling buffer characteristics for splicing operations of video streams
US8279926B2 (en) 2009-06-18 2012-10-02 Cisco Technology, Inc. Dynamic streaming with latticed representations of video
CN101931819B (zh) * 2009-06-26 2012-12-26 宏碁股份有限公司 时间性错误隐藏方法
US8340510B2 (en) * 2009-07-17 2012-12-25 Microsoft Corporation Implementing channel start and file seek for decoder
US9565479B2 (en) * 2009-08-10 2017-02-07 Sling Media Pvt Ltd. Methods and apparatus for seeking within a media stream using scene detection
GB2475739A (en) * 2009-11-30 2011-06-01 Nokia Corp Video decoding with error concealment dependent upon video scene change.
US9223643B2 (en) * 2010-03-04 2015-12-29 Microsoft Technology Licensing, Llc Content interruptions
US20110222837A1 (en) * 2010-03-11 2011-09-15 Cisco Technology, Inc. Management of picture referencing in video streams for plural playback modes
US8928809B2 (en) * 2010-09-15 2015-01-06 Verizon Patent And Licensing Inc. Synchronizing videos
EP2661894B1 (en) * 2010-12-30 2015-06-17 Skype Concealment of data loss for video decoding
US20120195573A1 (en) * 2011-01-28 2012-08-02 Apple Inc. Video Defect Replacement
US9196305B2 (en) * 2011-01-28 2015-11-24 Apple Inc. Smart transitions
GB2497915B (en) 2011-10-25 2015-09-09 Skype Estimating quality of a video signal
US9979958B2 (en) 2012-04-20 2018-05-22 Qualcomm Incorporated Decoded picture buffer processing for random access point pictures in video sequences
US8819525B1 (en) 2012-06-14 2014-08-26 Google Inc. Error concealment guided robustness
US9479776B2 (en) 2012-07-02 2016-10-25 Qualcomm Incorporated Signaling of long-term reference pictures for video coding
GB2513090B (en) 2013-01-28 2019-12-11 Microsoft Technology Licensing Llc Conditional concealment of lost video data
US9756356B2 (en) * 2013-06-24 2017-09-05 Dialogic Corporation Application-assisted spatio-temporal error concealment for RTP video
AU2014294215B2 (en) * 2013-07-22 2018-10-04 Sony Corporation Image processing device and method
KR20180081846A (ko) * 2013-10-22 2018-07-17 브이아이디 스케일, 인크. 비디오 송신 시스템에 대한 에러 은닉 모드 시그널링
EP2876890A1 (en) * 2013-11-21 2015-05-27 Thomson Licensing Method and apparatus for frame accurate synchronization of video streams
US9774881B2 (en) * 2014-01-08 2017-09-26 Microsoft Technology Licensing, Llc Representing motion vectors in an encoded bitstream
US9749642B2 (en) 2014-01-08 2017-08-29 Microsoft Technology Licensing, Llc Selection of motion vector precision
KR101947513B1 (ko) * 2015-12-24 2019-02-13 연세대학교 산학협력단 오류 은닉을 이용한 비디오 코딩의 부호화 방법 및 복호화 방법
WO2020058951A1 (en) 2018-09-23 2020-03-26 Beijing Bytedance Network Technology Co., Ltd. Utilization of non-sub block spatial-temporal motion vector prediction in inter mode
US10636451B1 (en) * 2018-11-09 2020-04-28 Tencent America LLC Method and system for video processing and signaling in transitional video scene
US20210352341A1 (en) * 2020-05-06 2021-11-11 At&T Intellectual Property I, L.P. Scene cut-based time alignment of video streams
CN113225620B (zh) * 2021-04-29 2022-09-30 北京达佳互联信息技术有限公司 视频处理方法和视频处理装置

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
SU1109945A1 (ru) 1982-08-13 1984-08-23 Ленинградский Институт Авиационного Приборостроения Способ формировани сигнала дл коррекции искажений телевизионного изображени и устройство дл его реализации
JP3519441B2 (ja) 1993-02-26 2004-04-12 株式会社東芝 動画像伝送装置
US5561477A (en) * 1994-10-26 1996-10-01 Thomson Consumer Electronics, Inc. System for coding a video signal in the presence of an image intensity gradient
US5543853A (en) * 1995-01-19 1996-08-06 At&T Corp. Encoder/decoder buffer control for variable bit-rate channel
KR100215428B1 (ko) * 1995-01-23 1999-08-16 윤종용 B픽처의에러은폐방법
US5844594A (en) * 1995-10-05 1998-12-01 Microsoft Corporation Method and apparatus for MPEG encoding
US5802079A (en) 1996-04-04 1998-09-01 Lucent Technologies Inc. Transmission system for digital audio broadcasting
US5767922A (en) * 1996-04-05 1998-06-16 Cornell Research Foundation, Inc. Apparatus and process for detecting scene breaks in a sequence of video frames
FR2751772B1 (fr) 1996-07-26 1998-10-16 Bev Bureau Etude Vision Soc Procede et dispositif fonctionnant en temps reel, pour le reperage et la localisation d'une zone en mouvement relatif dans une scene, ainsi que pour la determination de la vitesse et la direction du deplacement
US6195458B1 (en) * 1997-07-29 2001-02-27 Eastman Kodak Company Method for content-based temporal segmentation of video
US6084641A (en) 1997-08-06 2000-07-04 General Instrument Corporation Fade detector for digital video
US6373836B1 (en) 1997-09-15 2002-04-16 Genesys Telecommunications Laboratories, Inc. Apparatus and methods in routing internet protocol network telephony calls in a centrally-managed call center system
US6404817B1 (en) * 1997-11-20 2002-06-11 Lsi Logic Corporation MPEG video decoder having robust error detection and concealment
US6310915B1 (en) * 1998-11-20 2001-10-30 Harmonic Inc. Video transcoder with bitstream look ahead for rate control and statistical multiplexing
GB2347038A (en) * 1999-02-18 2000-08-23 Nokia Mobile Phones Ltd A video codec using re-transmission
US7551673B1 (en) * 1999-05-13 2009-06-23 Stmicroelectronics Asia Pacific Pte Ltd. Adaptive motion estimator
JP3630590B2 (ja) * 1999-08-25 2005-03-16 沖電気工業株式会社 復号化装置及び伝送システム
US6643259B1 (en) * 1999-11-12 2003-11-04 3Com Corporation Method for optimizing data transfer in a data network
US7110454B1 (en) * 1999-12-21 2006-09-19 Siemens Corporate Research, Inc. Integrated method for scene change detection
JP2001189713A (ja) 1999-12-28 2001-07-10 Toshiba Corp データ伝送装置およびデータ伝送方法
KR100698106B1 (ko) 2000-03-07 2007-03-26 엘지전자 주식회사 엠펙(mpeg)압축 비디오 환경에서 계층적 혼합형장면 변화 검출 방법
GB2362533A (en) 2000-05-15 2001-11-21 Nokia Mobile Phones Ltd Encoding a video signal with an indicator of the type of error concealment used
US7751683B1 (en) * 2000-11-10 2010-07-06 International Business Machines Corporation Scene change marking for thumbnail extraction
US6721361B1 (en) * 2001-02-23 2004-04-13 Yesvideo.Com Video processing system including advanced scene break detection methods for fades, dissolves and flashes
JP2004531925A (ja) * 2001-03-05 2004-10-14 インタービデオインコーポレイテッド 圧縮されたビデオビットストリームにおける冗長な動きベクトルを符号化し復号するシステム及び方法
US6865227B2 (en) * 2001-07-10 2005-03-08 Sony Corporation Error concealment of video data using motion vector data recovery
US6959044B1 (en) * 2001-08-21 2005-10-25 Cisco Systems Canada Co. Dynamic GOP system and method for digital video encoding
KR100420601B1 (ko) * 2001-11-22 2004-03-02 에스케이 텔레콤주식회사 비디오 데이터 스트리밍 서비스 방법
FI114679B (fi) * 2002-04-29 2004-11-30 Nokia Corp Satunnaisaloituspisteet videokoodauksessa
AU2003247605A1 (en) * 2002-07-02 2004-01-23 Conexant Systems, Inc. Hypothetical reference decoder for compressed image and video

Also Published As

Publication number Publication date
AU2003281127B2 (en) 2009-04-02
WO2004008733A3 (en) 2004-07-22
CN1669322A (zh) 2005-09-14
RU2005103827A (ru) 2005-09-10
AU2003281127A1 (en) 2004-02-02
EP1535467B1 (en) 2017-03-15
WO2004008733A2 (en) 2004-01-22
KR101075860B1 (ko) 2011-10-25
US20040139462A1 (en) 2004-07-15
EP1535467A4 (en) 2009-09-02
JP2005533422A (ja) 2005-11-04
JP4373329B2 (ja) 2009-11-25
RU2321967C2 (ru) 2008-04-10
US8107539B2 (en) 2012-01-31
EP1535467A2 (en) 2005-06-01
KR20100108442A (ko) 2010-10-06
CN102291585A (zh) 2011-12-21

Similar Documents

Publication Publication Date Title
MXPA05000559A (es) Metodo para ocultamiento de errores en secuencias de video.
JP5007322B2 (ja) ビデオ符号化方法
KR100892119B1 (ko) 비디오 부호화
KR100984368B1 (ko) 비디오 부호화
KR100548316B1 (ko) 동영상 에러 보정 방법 및 장치
KR20050019876A (ko) 비디오 시퀀스에서 오류 은폐 방법
Frater et al. Error concealment in video coding of arbitrarily shaped objects

Legal Events

Date Code Title Description
FG Grant or registration