ES2268783T3 - Conmutacion de flujos de bits de video comprimidos. - Google Patents
Conmutacion de flujos de bits de video comprimidos. Download PDFInfo
- Publication number
- ES2268783T3 ES2268783T3 ES98935135T ES98935135T ES2268783T3 ES 2268783 T3 ES2268783 T3 ES 2268783T3 ES 98935135 T ES98935135 T ES 98935135T ES 98935135 T ES98935135 T ES 98935135T ES 2268783 T3 ES2268783 T3 ES 2268783T3
- Authority
- ES
- Spain
- Prior art keywords
- coding
- switching
- bit stream
- decision
- decoder
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 238000000034 method Methods 0.000 claims description 18
- 238000012545 processing Methods 0.000 claims description 10
- 239000013598 vector Substances 0.000 claims description 9
- 230000008859 change Effects 0.000 claims description 5
- 230000002457 bidirectional effect Effects 0.000 claims description 4
- 230000000694 effects Effects 0.000 claims description 4
- 239000000155 melt Substances 0.000 claims description 3
- 230000009467 reduction Effects 0.000 claims description 3
- 238000011002 quantification Methods 0.000 claims description 2
- 238000013459 approach Methods 0.000 description 5
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000000873 masking effect Effects 0.000 description 2
- 230000008929 regeneration Effects 0.000 description 2
- 238000011069 regeneration method Methods 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
- 238000005303 weighing Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/24—Systems for the transmission of television signals using pulse code modulation
- H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
- H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23424—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving splicing one content stream with another content stream, e.g. for inserting or substituting an advertisement
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
Un flujo de bits MPEG se conmuta en el dominio de vídeo, entre un par descodificador-recodificador, que permanecen continuamente operativos, pero que son transparentes, debido a la reutilización en el recodificador de la decisión de codificación tomada en la codificación previa del flujo de bits MPEG, e inferida en el descodificador del conmutador. Alrededor del punto de conmutación, se modifican las decisiones de codificación.
Description
Conmutación de flujos de bits de video
comprimidos.
Esta invención se refiere al campo del video
digital comprimido.
Puesto que los flujos de bits de video están
presentes de manera creciente en la cadena de programas, se necesita
técnicas para su manipulación. Una de las técnicas más importantes,
es la capacidad de conmutar entre dos señales comprimidas.
Típicamente, esto se necesita para la edición de programas; esto
involucra la conmutación entre diferentes "tomas", cada una de
las cuales será una sección procedente de un flujo de bits. Esto
puede ser realizado en tiempo real, o no en tiempo real. También se
necesita la conmutación en continuidad/presentación, involucrando
conmutación en tiempo real entre diferentes estudios u otras
fuentes, y para la "opt-out" local/regional,
es decir para conmutar desde una señal de red, a programas o
anuncios regionales o locales.
La conmutación de señales de video analógicas, o
de señales digitales no comprimidas, es de implementación
relativamente directa, puesto que los momentos adecuados para la
conmutación (aquí denominados "puntos de conmutación"), se
producen a intervalos regulares, típicamente durante el borrado de
imagen. No es este el caso con las señales comprimidas, en las que
las imágenes ocupan a menudo una cantidad variable de tiempo y/o de
bits. Además, el sistema de compresión puede utilizar predicción
temporal, lo que complica más la conmutación.
Una forma sencilla de conmutar flujos de bits es
descodificarlos, conmutarlos en el dominio descomprimido, y
re-codificarlos. Esto proporciona una buena
flexibilidad, pero la cascada de operaciones de codificación
provoca una pérdida de la calidad de la imagen. Esto puede
constituir un serio problema para ciertos tipos de sistemas de
compresión, en los que hay muchos parámetros y decisiones de
codificación, que podrían ser adoptados de forma diferente al
re-codificar. MPEG-2, actualmente el
sistema de compresión más importante para la emisión, es uno de
tales sistemas. Esta invención está concedida principalmente para
MPEG-2, pero puede ser utilizada por otros sistemas
de compresión.
Un enfoque del arte previo para conmutar sin
pérdida de calidad, es lo que se conoce como "empalme del flujo
de transporte". Esto involucra definir puntos (denominados
"puntos de empalme") en el flujo de bits de entrada (en la
forma de flujo de transporte MPEG), en el que estos pueden ser
conmutados directamente. Se ha propuesto dos variaciones:
"empalme perfecto"
\hskip0,5cmy
\hskip0,5cm"empalme imperfecto".
Potencialmente, el empalme es de implementación
barata, puesto que no hay necesidad de descodificar, o
re-codificar, el video. Sin embargo carece de
flexibilidad por varias razones.
La conmutación puede ocurrir sólo en ciertos
momentos, determinados por la estructura del Grupo de Imágenes
(GOP) MPEG. La imagen antes de la conmutación debe ser una
imagen-I o -P, y la imagen después de esta debe ser
una imagen-I. Típicamente, esto significa que la
conmutación puede ser especificada solo hasta aproximadamente medio
segundo de resolución.
El punto de conmutación de video determina
cuando es conmutado cualquier audio correspondiente, debido a que
el video y el audio son parte de un solo flujo de transporte. No es
posible tener puntos de conmutación de video y audio
independientes.
Los codificadores corriente arriba, deben
conocer cuando puede necesitarse la conmutación; si no lo hacen,
pueden tener que insertar un gran número de puntos de empalme.
Un codificador que produce un flujo de bits con
puntos de empalme perfecto, puede tener que comprometer su
rendimiento de codificación para insertar estos puntos. Esto se debe
a que la trayectoria intermedia de un codificador corriente abajo,
debe fijarse exactamente en los puntos de empalme, haciendo más
difíciles los requisitos de control de velocidad del codificador,
especialmente si hay un gran número de puntos de empalme. Se ha
propuesto sortear este problema por medio de insertar secuencias de
aparición gradual de la imagen, alrededor de los puntos de
conmutación, pero esto limita la utilidad del empalme.
No son posibles otras transiciones distintas de
cortes simples (es decir, fundidos cruzados).
Otro enfoque es conmutar y
re-codificar las entradas descodificadas, pero no
hacer uso de todo el conjunto de acciones de codificación
disponibles, por ejemplo dentro del "conjunto de herramientas"
MPEG-2. Por medio de reducir el número de
decisiones y parámetros que pueden cambiar en la
re-codificación, se reduce la cantidad de
distorsión adicional introducida. Una propuesta previa hace uso de
esta idea, por medio de utilizar una estructura GOP relativamente
simple de IBIBIBIB (cfr. IBBPBBPBBPBBIBBP, que se utiliza
típicamente). Los inconvenientes de este enfoque son que limitar
las opciones de codificación tiende a necesitar una tasa de bits
superior para la misma calidad de imagen, y que introduce
incompatibilidades con otro equipamiento de codificación que
utilice toda la gama de opciones.
Una previa aplicación de patente de la BBC, WO
97/08 898, describió una conmutación de flujo de bits utilizando un
enfoque de
descodificación-conmutación-re-codificación,
pero en este caso el descodificador produjo una salida adicional,
proporcionando las decisiones de codificación utilizadas por el
codificador original. Mediante utilizar las mismas decisiones de la
re-codificación, la degradación adicional
introducida sería pequeña. Esta conmutación también incluía rutas
de desvío, utilizadas muchas imágenes alejadas respecto del punto de
conmutación, lo que asegura que la conmutación puede hacerse
completamente transparente, pero el uso de esto complica la
operación de la conmutación.
La referencia "Splicing MPEG Video Streams in
the Compressed Domain" 1997 IEEE, 1^{ST} WORKSHOP ON MULTIMEDIA
SIGNAL PROCESSING, 23 de junio de 1997, páginas
225-230, XP002081482 Princeton NJ USA, revela
técnicas de empalme del arte previo.
Es un objetivo de la presente invención
proporcionar métodos y aparatos mejorados para la conmutación de
flujos de bits de video comprimidos.
La invención se expone en las reivindicaciones
anexas.
Se ha mostrado que para
re-codificar utilizando las mismas decisiones de
codificación, la distorsión adicional introducida es despreciable
en circunstancias normales. Así, el descodificador y
re-codificador puede mantenerse "en circuito"
en todo momento, simplificando la conmutación.
La información de decisión de la codificación
puede incluir: dimensiones de la imagen; velocidad de cuadros;
estructura de la imagen (codificada por cuadro, o codificada por
campo); tipo de imagen (I, P o B); si los
macro-bloques son infra-codificados
o usan predicción; si se utiliza predicción hacia delante, hacia
atrás, o bidireccional; vectores de movimiento; matrices de pesado
de visibilidad del cuantificador; etapa del cuantificador y estado
de la memoria intermedia, de un descodificador corriente abajo.
Ventajosamente, el mencionado medio de
procesamiento de la decisión de codificación sirve, en torno al
punto de conmutación, para modificar decisiones de codificación,
para la re-codificación. En concreto, la estrategia
de regeneración puede ser modificada al
re-codificar, mediante mover las
tramas-I y las tramas-P de la
re-codificación, y/o viceversa, o mediante utilizar
a un "par I-P" de imágenes de estructura de
campo MPEG. El objetivo de esto es impedir que la memoria
intermedia del descodificador corriente abajo, este demasiado llena
o vacía, debido a que las tramas-1 lleguen
demasiado separadas o demasiado juntas, en el flujo de bits
conmutado.
Ventajosamente, el desbordamiento por abajo de
una memoria intermedia del descodificador corriente abajo, se evita
a través de la reducción de la velocidad de bits para cuadros
adyacentes al punto de conmutación. Un efecto
psico-visual conocido como "borrado temporal"
puede ser utilizado para impedir que la memoria intermedia del
descodificador corriente abajo, se quede demasiado vacía. El ruido
de cuantificación en los cuadros muy próximos al punto de
conmutación, a menudo no es visible por el observador, y por lo
tanto el número de bits utilizado en estos cuadros puede ser
reducido deliberadamente.
Preferentemente, el mencionado medio de
procesamiento de la decisión de codificación, recibe información de
la ocupación de la memoria intermedia, de forma que el uso de bits
en los flujos de bits de entrada, se tiene en cuenta en el
algoritmo de control de la velocidad, del
re-codificador.
Se describirá ahora la invención a modo de
ejemplo, con referencia los dibujos anexos, en los cuales:
la figura 1 es un diagrama de bloques de un
conmutador acorde con la presente invención; y
la figura 2 es un diagrama de bloques del
aparato la condición previa de un flujo de bits, para un
empalme.
La figura 1 muestra, en forma de diagrama de
bloques, un aparato para conmutar entre dos flujos de bits de video
MPEG-2, denotados en el dibujo como flujo de bits A
y flujo de bits B. Se proporciona dos descodificadores MPEG, 10 y
12. Cada uno de los dos descodificadores produce dos salidas: una
señal de video de codificada, y una señal de decisión de
codificación. La señal de decisión de codificación contiene toda la
información relevante sobre como se codifica o el flujo de bits
correspondiente, que puede deducirse a partir del flujo de bits.
Esta información incluye, pero no se limita a, lo siguiente:
dimensiones de la imagen; velocidad de cuadros; estructura de la
imagen (codificada por cuadro, o codificada por campo); tipo de
imagen (I, P o B); si los macro-bloques son
infra-codificados o usan predicción; si se utiliza
predicción hacia delante, hacia atrás, o bidireccional; vectores de
movimiento; matrices de pesado de visibilidad del cuantificador;
etapa del cuantificador y estado de la memoria intermedia, de un
descodificador corriente abajo.
Las dos señales de video descodificado son
conmutadas en el conmutador de video 14, como si fueran señales
descomprimidas convencionales, y la salida del conmutador de video
es enviada a un codificador 16. Este es una clase especial de
codificador MPEG-2, que puede hacer uso de una señal
de decisión de codificación, como se ha revelado por ejemplo en los
documentos EP 0 765 576 o WO98/03 017. Este codificador volverá a
utilizar parte, o la totalidad, de las decisiones tomadas por el
codificador o codificadores que crearon los flujos de bits de
entrada, como sigue.
El bloque 18 sirve para proporcionar decisiones
de codificación al codificador 16. Para cuadros muy alejados del
punto de conmutación, se vuelve a utilizar la totalidad de las
decisiones de codificación, y el bloque 18 sirve meramente para
pasar las decisiones de codificación asociadas con la
descodificación del flujo de bits A o el flujo de bits B, según sea
apropiado. Hacer esto provoca que el proceso de
re-codificación sea casi transparente, es decir la
imagen obtenida por la descodificación del flujo de bits de salida,
es virtualmente indistinguible respecto de la que se habría
obtenido descodificando el flujo de bits de entrada
correspondiente.
Para cuadros próximos al punto de conmutación,
el bloque 18 modifica decisiones de codificación, y el tipo de
imagen MPEG puede ser cambiado en la
re-codificación. El objetivo principal de esto es
modificar la estrategia de regeneración, para que sea más adecuada
para el flujo de bits conmutado. Típicamente, una imagen
intra-codificada (imagen-I) se
utiliza pronto tras el punto de conmutación, para impedir que la
predicción se produzca "a través del corte". Más
ingeniosamente, las imágenes-I en los flujos de bits
de entrada pueden ser "convertidas" a imágenes no intra
(típicamente imágenes-P), al efecto de impedir que
lleguen en sucesión próxima demasiadas imágenes-I,
lo que podría provocar que la velocidad de bits de corta duración
sea demasiado alta, y desborde por abajo la memoria intermedia de
un descodificador corriente abajo. Bajo ciertas circunstancias (por
ejemplo cuando hay una gran cantidad de movimiento en la escena),
un cuadro intra-codificado puede ser convertido en
un campo intra-codificado, seguido por un campo
codificado hacia delante (para hacer esto, la estructura de imagen
MPEG-2 se convierte de cuadro a campo). Este es un
método alternativo para reducir la tasa de bits de corta
duración.
El ejemplo expuesto abajo muestra un caso en el
que una imagen en el flujo de bits A, y dos en el flujo de bits B,
han modificado su tipo de imagen en la
re-codificación. Estas imágenes son mostradas en
tipo de letra negrita (por claridad, las imágenes se muestran en el
orden en el que son visualizadas a la salida del descodificador, no
el orden en que aparecen en el flujo de datos):
El modo de predicción y los vectores de
movimiento, son modificados si es necesario, para tener en cuenta
cualquier cambio en el tipo de imagen, y para impedir que se haga
predicciones "a través del corte". A menudo esto involucra una
simplificación; en el ejemplo anterior, la imagen-B
que sigue al punto de conmutación contendría usualmente
macro-bloques predichos de modo bidireccional en el
flujo de bits de entrada B, estos son modificados para ser
predichos hacia delante, y se descarta los vectores hacia atrás. Sin
embargo, cuando una imagen-I es convertida a una
imagen-P, se necesitará estimar los vectores, salvo
que los vectores de ocultación de MPEG-2 estuvieran
disponibles en el flujo de bits de entrada.
Los parámetros del cuantificador son modificados
para controlar el número de bits producidos en la
re-codificación. Esto se realiza típicamente
mediante el controlador de velocidad en cualquier codificador
MPEG-2, que supervisa el estado de la memoria
intermedia de un descodificador corriente abajo (realmente, controla
el estado de su propia memoria intermedia de salida, que replica el
de la memoria intermedia del descodificador).
El controlador de velocidad para esta invención,
difiere de uno convencional por cuanto que el uso de bits del flujo
de bits de entrada, es transmitido por vía de las decisiones de
codificación, y es utilizado para configurar objetivos para el
número de bits a ser producidos en la
re-codificación. Estos objetivos se utilizan
después para determinar los parámetros del cuantificador. Además,
sobre una serie de cuadros que siguen al punto de conmutación, el
controlador de velocidad intenta traer el estado de la memoria
intermedia de un descodificador corriente abajo, a igualar el que
se habría tenido si hubiera enviado del flujo de bits B,
directamente al descodificador. Típicamente, se determina que el
número de bits requerido es ligeramente menor que el flujo de bits
de entrada. Cuando el estado de la memoria intermedia del
descodificador coincide, el controlador de velocidad introduce un
modo "bloqueado", en el que los parámetros del cuantificador
(así como todas las demás decisiones de codificación) se mantienen
exactamente iguales en el flujo de bits de entrada. Después de este
punto, el conmutador es virtualmente transparente. Debido al efecto
denominado "enmascaramiento temporal", a menudo puede
permitirse que el nivel de ruido en las imágenes inmediatamente
anteriores y posteriores al punto de conmutación, sea superior
respecto de otros momentos. El ojo está distraído por el cambio en
el material de la imagen, y deja de notar el ruido adicional. Así,
el número de bits utilizados en estas imágenes puede hacerse
deliberadamente muy pequeño, si esto ayuda a conseguir a que el
estado de la memoria intermedia coincida, como arriba.
Aunque esta descripción específica se ha
enfocado a la conmutación de flujos de bits MPEG-2,
cualquiera de las técnicas es aplicable para ser utilizada con
otros tipos de flujos de bits de video comprimidos, basados en DCT,
como son JPEG, ETSI y MPEG-1, o incluso flujos de
bits no basados en DCT, como son los sistemas basados en tren de
ondas, o en fractales.
La invención puede ser fácilmente modificada,
para contemplar el caso en que la conmutación es entre entradas
comprimidas y no comprimidas; aquí, el descodificador hace uso de
las decisiones de codificación en la entrada comprimida, pero
adopta sus propias decisiones cuando se selecciona la entrada no
comprimida.
El conmutador puede extenderse para incorporar a
una reducción en la velocidad de bits, en otras palabras, la
velocidad del flujo de bits de salida es menor que uno, o ambos, de
los flujos de bits de entrada. Por ejemplo, una velocidad de bits
inferior puede ser utilizada para una transmisión al espectador, que
es utilizada para la distribución desde el estudio hasta el
transmisor. En tales casos, no se pretende que el conmutador sea
transparente, y no existe la necesidad de intentar coincidir con el
estado de memoria intermedia del descodificador corriente abajo,
como arriba.
Además de llevar a cabo simples conmutaciones,
puede necesitarse otras transiciones de video. La más importante de
estas es el fundido cruzado. La codificación MPEG de secuencias de
fundido cruzado tiende a proporcionar imágenes de baja calidad.
Esto se debe a la dificultad para estimar los vectores de
movimiento, y al pobre rendimiento de la predicción hacia delante.
Esta invención puede extenderse para llevar a cabo fundidos
cruzados.
Con este objeto, el conmutador de video descrito
adopta la forma de un dispositivo de fundido cruzado de video. Se
reconocerá que durante el fundido, las decisiones desde ambos flujos
de bits de entrada están disponibles para ser utilizadas en la
re-codificación.
En una estrategia de codificación, las
decisiones a partir de un flujo de bits A son utilizadas para la
primera parte del fundido, y para la última parte se utiliza las
decisiones a partir del flujo de bits B. En una estrategia
alternativa, se calcula la calidad potencial de codificación, por
separado, utilizando cada conjunto de decisiones, y se escoge el
mejor conjunto.
No es apropiado el enmascaramiento temporal,
puesto que no hay cambios súbitos de una secuencia a otra. Sin
embargo, la mezcla de secuencias tiende a disminuir la visibilidad
del ruido de la cuantificación, y el controlador de velocidad del
codificador puede explotar este hecho.
Algunas técnicas de esta invención pueden ser
utilizadas para la condición previa de un flujo de transporte, como
parte de un dispositivo de empalme.
En referencia ahora la figura 2, esta muestra el
empalme desde el flujo de transporte A al flujo de transporte B. El
flujo de transporte A es demultiplexado en el demultiplexor 20, para
eliminar flujos de bits (por claridad, se muestra sólo un flujo de
bits de video). El flujo de bits de video es descodificado a video
en el descodificador 22, entregándose también las decisiones de
codificación. La señal de video pasa directamente a un codificador
de video 24, que recibe también las decisiones de codificación,
después de que han pasado a través de un bloque "modificación de
decisiones de codificación" 26. Cuando muchos cuadros proceden de
una empalme, el video es re-codificado con las
mismas decisiones, y es multiplexado de nuevo en el multiplexor de
flujo de transporte 28; este será transparente bajo condiciones
normales. Cerca del momento del empalme, en el empalmador de flujo
de transporte 30, el número de bits producidos será ajustado para
cumplir las limitaciones de memoria intermedia para el empalme,
mediante modificar las decisiones de codificación en el bloque 6,
típicamente por medio de ajustar los parámetros del
cuantificador.
En adición a lo anterior, las entradas deben ser
sincronizadas para asegurar que se produce el empalme en el tipo de
imagen correcto, y se requiere modificaciones para el reloj fechador
y la información de referencia del reloj, en el flujo de
transporte. Estos aspectos no se muestran en el diagrama de
arriba.
Otra posible realización de la presente
invención, es un conmutador de conformación de edición no en tiempo
real, basado en soporte lógico. Para acelerar su funcionamiento,
puede realizarse algunas modificaciones al enfoque esencialmente de
equipamiento físico, ya descrito. Puede copiarse directamente flujos
de datos cuando el conmutador sea eficazmente transparente. Puede
llevarse a cabo solo una descodificación parcial - en el dominio
DCT - bajo ciertas circunstancias, siempre que no se cambie el tipo
de imagen. Esto puede conducir a una pequeña pérdida, pero
aceptable en la calidad.
Debe comprenderse que esta invención se ha
descrito sólo por medio de ejemplos, y que es posible una amplia
variedad de modificaciones sin apartarse del alcance de la
invención.
Claims (22)
1. Un aparato para la conmutación de flujos de
bits de video comprimidos, que comprende una primera entrada de
flujo de bits; una segunda entrada de flujo de bits; una salida de
flujo de bits conmutada; un primer descodificador (10) para recibir
un primer flujo de bits de entrada desde la primera entrada de flujo
de bits, y proporcionar una primera señal de video descodificado, y
una primera señal de decisión de codificación; un segundo
descodificador (12) para recibir un segundo flujo de bits de
entrada, desde la segunda entrada de flujo de bits, y proporcionar
una segunda señal de video descodificada, y una segunda señal de
decisión de codificación; una unidad de conmutador de video (14),
para conmutar entre las mencionadas señales de video primera y
segunda; un codificador (16) para re-codificar la
mencionada señal de video conmutada, y medios de procesamiento de
decisión de codificación (18), para recibir las mencionadas señales
de decisión de codificación primera y segunda, y entregar decisiones
de codificación al mencionado codificador, de modo que el
mencionado codificador y, por lo menos, uno de los mencionados
primer descodificador y segundo descodificador, permanece en
circuito continuamente, y no sólo durante un periodo de conmutación
entre la salida del flujo de bits conmutado, y una entre la primera
entrada de flujo de bits y la segunda entrada de flujo de bits,
siendo las mencionadas descodificación y
re-codificación, como resultado del uso de las
decisiones de codificación, por el codificador sustancialmente
transparente, en el régimen estacionario.
2. Un aparato acorde con la reivindicación 1,
en el que las mencionadas señales de decisión de codificación,
transportan información en los siguientes parámetros: dimensiones de
la imagen; velocidad de cuadros; estructura de la imagen
(codificada por cuadro, o codificada por campo); tipo de imagen (I,
P o B); saber si los macro-bloques son
infra-codificados o usan predicción; saber si se
utiliza predicción hacia delante, hacia atrás, o bidireccional;
vectores de movimiento; matrices de pesado de visibilidad del
cuantificador; etapa del cuantificador y estado de la memoria
intermedia, de un descodificador corriente abajo.
3. Un aparato acorde con la reivindicación 1 o
la reivindicación 2, en el que el mencionado medio de procesamiento
de decisión de codificación sirve, en torno a un punto de
conmutación, para modificar las decisiones de codificación para la
re-codificación.
4. Un aparato acorde con la reivindicación 3,
en el que el mencionado medio de procesamiento de decisión de
codificación sirve, alrededor del punto de conmutación, para
re-codificar cuadros-1 como
cuadros-P, y viceversa.
5. Un aparato acorde con la reivindicación 3,
en el que el mencionado medio de procesamiento de decisión de
codificación sirve, en torno al punto de conmutación, para convertir
un cuadro intra-codificado, en un campo
intra-codificado, seguido por un campo codificado
hacia delante.
6. Un aparato acorde con cualquiera de las
reivindicaciones precedentes, donde el desbordamiento por abajo de
una memoria intermedia del descodificador corriente abajo, se evita
a través de la reducción de la velocidad de bits para las tramas
adyacentes al punto de conmutación.
7. Un aparato acorde con la reivindicación 6,
en el que la tasa de bits se reduce por medio de permitir que el
ruido de cuantificación ascienda hasta un nivel enmascarado solo por
el efecto psico-visual de un cambio marcado en el
contenido de la imagen.
8. Un aparato acorde con cualquiera de las
reivindicaciones precedentes, en el que el mencionado medio de
procesamiento de decisión de codificación, recibe información de
ocupación de la memoria intermedia, de forma que se tiene en cuenta
el uso de bits en los flujos de bits de entrada, en el algoritmo de
control de velocidad del re-codificador.
9. Un aparato acorde con cualquiera de las
reivindicaciones precedentes, en el que el codificador para
re-codificar la mencionada señal de video conmutada,
pasa a un modo de control de velocidad desbloqueado en la
conmutación, y vuelve a entrar en un modo bloqueado, en el que se
usa directamente las decisiones de codificación, una vez que el
estado de memoria intermedia determinado de un descodificador
corriente abajo, corresponde a aquel aplicable a un régimen
estacionario de la señal de video conmutada.
10. Un aparato acorde con cualquiera de las
reivindicaciones precedentes, en el que la mencionada unidad de
conmutación de video está adaptada para llevar a cabo fundidos
cruzados.
11. Un aparato acorde con la reivindicación 10,
en el que el codificador está adaptado para utilizar la primera
decisión de codificación en una primera parte del fundido, y las
segundas decisiones de codificación en una segunda parte del
fundido.
12. Un aparato acorde con la reivindicación 10,
en el que la calidad de codificación potencial es calculada con el
codificador, utilizando por separado las decisiones de codificación
primera y segunda, y una selección realizada del conjunto de
decisiones de codificación que proporcionan mejor calidad de
codificación.
13. Un método para la conmutación de flujos de
bits de video comprimidos, que comprende las etapas de descodificar,
por lo menos, un primer flujo de bits de entrada y proporcionar,
por lo menos, una primera señal de video descodificada y, por lo
menos, una primera señal de decisión de codificación; conmutar entre
la mencionada primera señal de video y otra señal de video, y
re-codificar la mencionada señal de video conmutada
para proporcionar continuamente, y no sólo durante un periodo de
conmutación, la salida del flujo de bits utilizando información
procedente de la primera señal de decisión de codificación, cuando
la señal de video conmutada resulta de la descodificación del
primer flujo de bits de entrada, de forma que las mencionadas
descodificación y re-codificación son
sustancialmente transparentes en el régimen estacionario.
14. Un método acorde con la reivindicación 13,
que comprende además las etapas de descodificar un segundo flujo de
bits de entrada, y proporcionar una segunda señal descodificada y
una segunda señal de decisión de codificación; conmutar entre las
mencionadas señales de video primera y segunda; y
re-codificar la mencionada señal de video
conmutada, utilizando información procedente de las mencionadas
señales de decisión de codificación primera y segunda, para
proporcionar una salida de video continua, con las mencionadas
descodificación y re-codificación siendo
sustancialmente transparentes en el régimen estacionario.
15. Un método acorde con la reivindicación 13 o
la reivindicación 14, en el que los mencionados flujos de bits de
entrada son descodificados a un nivel de coeficiente DCT.
16. Un método acorde con la reivindicación 13 o
la reivindicación 14, en el que los mencionados flujos de bits de
entrada son descodificados en señales de video.
17. Un método acorde con cualquiera de las
reivindicaciones 13 a 16, en el que las mencionadas señales de
decisión de codificación transmiten información sobre alguno, o la
totalidad, de los siguientes parámetros: dimensiones de la imagen;
velocidad de cuadros; estructura de la imagen (codificada por
cuadro, o codificada por campo); tipo de imagen (I, P o B); saber
si los macro-bloques son
infra-codificados o usan predicción; saber si se
utiliza predicción hacia delante, hacia atrás, o bidireccional;
vectores de movimiento; matrices de pesado de visibilidad del
cuantificador; etapa del cuantificador y estado de la memoria
intermedia, de un descodificador corriente abajo.
18. Un método acorde con cualquiera de las
reivindicaciones 13 a 17, en el que las mencionadas decisiones de
codificación son modificadas alrededor de un punto de
conmutación.
19. Un método acorde con la reivindicación 18,
en el que el mencionado medio de procesamiento de decisión de
codificación sirve, alrededor del punto de conmutación, para
re-codificar cuadros-I como
cuadros-P, y viceversa.
20. Un método acorde con la reivindicación 18,
en el que el mencionado medio de procesamiento de decisión de
codificación sirve, alrededor del punto de conmutación, para
convertir un cuadro intra-codificado en un campo
intra-codificado, seguido por un campo codificado
hacia delante.
21. Un método acorde con cualquiera de las
reivindicaciones 13 a 20, en el que el desbordamiento por abajo de
una memoria intermedia del descodificador corriente abajo, se evita
a través de la reducción de la velocidad de bits, para los cuadros
adyacentes al punto de conmutación.
22. Un método acorde con la reivindicación 21,
en el que la velocidad de bits se reduce mediante permitir al ruido
de ecualización, ascender hasta un nivel enmascarado solo por el
efecto psico-visual de un cambio marcado en el
contenido de la imagen.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
GB9715237A GB2327548B (en) | 1997-07-18 | 1997-07-18 | Switching compressed video bitstreams |
GB9715237 | 1997-07-18 |
Publications (1)
Publication Number | Publication Date |
---|---|
ES2268783T3 true ES2268783T3 (es) | 2007-03-16 |
Family
ID=10816120
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
ES98935135T Expired - Lifetime ES2268783T3 (es) | 1997-07-18 | 1998-07-17 | Conmutacion de flujos de bits de video comprimidos. |
Country Status (9)
Country | Link |
---|---|
US (1) | US6831949B1 (es) |
EP (1) | EP0995315B1 (es) |
JP (1) | JP2001510964A (es) |
AU (1) | AU755898B2 (es) |
CA (1) | CA2295754C (es) |
DE (1) | DE69835211T2 (es) |
ES (1) | ES2268783T3 (es) |
GB (2) | GB2369518B (es) |
WO (1) | WO1999004571A1 (es) |
Families Citing this family (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6091995A (en) | 1996-11-08 | 2000-07-18 | Surx, Inc. | Devices, methods, and systems for shrinking tissues |
KR100555164B1 (ko) * | 1997-07-25 | 2006-03-03 | 소니 가부시끼 가이샤 | 편집 장치, 편집 방법, 재부호화 장치, 재부호화 방법, 스플라이싱 장치 및 스플라이싱 방법 |
GB2344728B (en) | 1998-09-23 | 2004-03-17 | British Broadcasting Corp | Audio compression |
GB9822087D0 (en) * | 1998-10-09 | 1998-12-02 | Snell & Wilcox Ltd | Improvements in data compression |
JP2000165802A (ja) | 1998-11-25 | 2000-06-16 | Matsushita Electric Ind Co Ltd | ストリーム編集装置と編集方法 |
GB2353655B (en) | 1999-08-26 | 2003-07-23 | Sony Uk Ltd | Signal processor |
JP4331835B2 (ja) * | 1999-09-22 | 2009-09-16 | パナソニック株式会社 | 画像データ伝送方法 |
GB2356997A (en) * | 1999-12-02 | 2001-06-06 | Sony Uk Ltd | Video signal processing |
GB2358539A (en) * | 2000-01-21 | 2001-07-25 | Sony Uk Ltd | Data processing method which separates parameter data from coded data |
JP4724919B2 (ja) * | 2000-06-02 | 2011-07-13 | ソニー株式会社 | 記録装置および記録方法、再生装置および再生方法、並びに記録媒体 |
JP2002064794A (ja) * | 2000-08-18 | 2002-02-28 | Sony Corp | 多重化装置および方法、画像出力装置および方法、並びに記録媒体 |
US7346698B2 (en) | 2000-12-20 | 2008-03-18 | G. W. Hannaway & Associates | Webcasting method and system for time-based synchronization of multiple, independent media streams |
US20030202576A1 (en) * | 2002-04-29 | 2003-10-30 | The Boeing Company | Method and apparatus for decompressing and multiplexing multiple video streams in real-time |
US20040260827A1 (en) * | 2003-06-19 | 2004-12-23 | Nokia Corporation | Stream switching based on gradual decoder refresh |
US7599565B2 (en) * | 2004-03-10 | 2009-10-06 | Nokia Corporation | Method and device for transform-domain video editing |
US7818444B2 (en) | 2004-04-30 | 2010-10-19 | Move Networks, Inc. | Apparatus, system, and method for multi-bitrate content streaming |
WO2006022221A1 (ja) * | 2004-08-25 | 2006-03-02 | Sony Corporation | 情報処理装置および情報処理方法、記録媒体、並びに、プログラム |
JP4822444B2 (ja) * | 2007-03-30 | 2011-11-24 | Kddi株式会社 | 動画編集装置 |
US8411569B2 (en) * | 2008-01-10 | 2013-04-02 | Alcatel Lucent | Method of splicing encoded multimedia data streams |
JP2009246489A (ja) * | 2008-03-28 | 2009-10-22 | Kddi R & D Laboratories Inc | 映像信号切替装置 |
JP2011193042A (ja) * | 2010-03-11 | 2011-09-29 | Toshiba Corp | 映像再生装置及び映像再生方法 |
CN102752488B (zh) * | 2011-08-02 | 2017-08-04 | 新奥特(北京)视频技术有限公司 | 实现多演播室系统的统一控制的方法、设备及系统 |
JP6019824B2 (ja) * | 2012-07-02 | 2016-11-02 | 富士通株式会社 | 動画像符号化装置及び動画像符号化方法ならびに動画像符号化用コンピュータプログラム |
US9813325B2 (en) | 2012-12-27 | 2017-11-07 | Comcast Cable Communications, Llc | Information stream management |
CN104104958B (zh) * | 2013-04-08 | 2017-08-25 | 联发科技(新加坡)私人有限公司 | 图像解码方法及其图像解码装置 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2885322B2 (ja) * | 1990-03-27 | 1999-04-19 | 日本ビクター株式会社 | フィールド間予測符号化装置及び復号化装置 |
KR0121301B1 (ko) * | 1992-09-30 | 1997-11-17 | 사또오 후미오 | 편집신호 디코딩 장치 |
US5614952A (en) * | 1994-10-11 | 1997-03-25 | Hitachi America, Ltd. | Digital video decoder for decoding digital high definition and/or digital standard definition television signals |
JP2776212B2 (ja) * | 1993-08-04 | 1998-07-16 | 日本ビクター株式会社 | 符号記録装置 |
EP0656729B1 (en) * | 1993-12-01 | 2000-02-09 | Matsushita Electric Industrial Co., Ltd. | Method and apparatus for editing or mixing compressed pictures |
US5651090A (en) * | 1994-05-06 | 1997-07-22 | Nippon Telegraph And Telephone Corporation | Coding method and coder for coding input signals of plural channels using vector quantization, and decoding method and decoder therefor |
EP0845908B1 (en) | 1994-06-17 | 2003-02-05 | Snell & Wilcox Limited | Compressing a signal combined from compression encoded video signals after partial decoding thereof |
US5495291A (en) * | 1994-07-22 | 1996-02-27 | Hewlett-Packard Company | Decompression system for compressed video data for providing uninterrupted decompressed video data output |
JP3019912B2 (ja) * | 1994-07-22 | 2000-03-15 | 日本ビクター株式会社 | 画像データ編集装置 |
KR100202538B1 (ko) * | 1994-12-23 | 1999-06-15 | 구자홍 | 엠펙 비디오 코덱 장치 |
GB2307613B (en) * | 1995-08-31 | 2000-03-22 | British Broadcasting Corp | Switching bit-rate reduced signals |
US6137834A (en) * | 1996-05-29 | 2000-10-24 | Sarnoff Corporation | Method and apparatus for splicing compressed information streams |
JP4666695B2 (ja) | 1996-07-15 | 2011-04-06 | アムストラ.インベストメンツ フォー ケイ.ジー.,リミテッド ライアビリティ カンパニー | ビデオ信号圧縮処理方法 |
US5917830A (en) * | 1996-10-18 | 1999-06-29 | General Instrument Corporation | Splicing compressed packetized digital video streams |
US5982436A (en) * | 1997-03-28 | 1999-11-09 | Philips Electronics North America Corp. | Method for seamless splicing in a video encoder |
KR100555164B1 (ko) * | 1997-07-25 | 2006-03-03 | 소니 가부시끼 가이샤 | 편집 장치, 편집 방법, 재부호화 장치, 재부호화 방법, 스플라이싱 장치 및 스플라이싱 방법 |
-
1997
- 1997-07-18 GB GB0204471A patent/GB2369518B/en not_active Expired - Fee Related
- 1997-07-18 GB GB9715237A patent/GB2327548B/en not_active Revoked
-
1998
- 1998-07-17 CA CA002295754A patent/CA2295754C/en not_active Expired - Fee Related
- 1998-07-17 AU AU84495/98A patent/AU755898B2/en not_active Ceased
- 1998-07-17 DE DE69835211T patent/DE69835211T2/de not_active Expired - Lifetime
- 1998-07-17 JP JP2000503661A patent/JP2001510964A/ja active Pending
- 1998-07-17 WO PCT/GB1998/002121 patent/WO1999004571A1/en active IP Right Grant
- 1998-07-17 EP EP98935135A patent/EP0995315B1/en not_active Expired - Lifetime
- 1998-07-17 ES ES98935135T patent/ES2268783T3/es not_active Expired - Lifetime
-
2000
- 2000-08-04 US US09/463,022 patent/US6831949B1/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
EP0995315B1 (en) | 2006-07-12 |
CA2295754A1 (en) | 1999-01-28 |
GB9715237D0 (en) | 1997-09-24 |
US6831949B1 (en) | 2004-12-14 |
WO1999004571A1 (en) | 1999-01-28 |
DE69835211T2 (de) | 2007-06-14 |
GB0204471D0 (en) | 2002-04-10 |
GB2369518A (en) | 2002-05-29 |
AU755898B2 (en) | 2003-01-02 |
JP2001510964A (ja) | 2001-08-07 |
GB2327548A (en) | 1999-01-27 |
DE69835211D1 (de) | 2006-08-24 |
EP0995315A1 (en) | 2000-04-26 |
AU8449598A (en) | 1999-02-10 |
GB2327548B (en) | 2002-05-01 |
CA2295754C (en) | 2007-05-15 |
GB2369518B (en) | 2002-07-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
ES2268783T3 (es) | Conmutacion de flujos de bits de video comprimidos. | |
EP0846396B1 (en) | Switching between bit-rate reduced signals | |
EP0923243B1 (en) | Editing device, editing method, splicing device, splicing method, encoding device, and encoding method | |
KR101132351B1 (ko) | Dsl 시스템에 대해 고속으로 채널 변경할 수 있게 하는 방법 및 장치 | |
US6529550B2 (en) | Coded stream splicing device and method, and coded stream generating device and method | |
CN107852515B (zh) | 视频流传输方法、装置、存储介质以及视频会议系统 | |
JP2001119305A (ja) | 信号処理装置 | |
ES2218986T3 (es) | Sistema de procesamiento de video que tambien comprime datos de decision de codificacion. | |
EP1079630A1 (en) | Signal processor for seamless splicing of MPEG-2 bitstreams in a video encoder | |
CN107105277B (zh) | 视频解码方法 | |
EP0916227A2 (en) | Method of switching video sequences and corresponding switching device and decoding system | |
KR19990072461A (ko) | 동화상부호화방법및장치및기록매체 | |
JP2002502161A (ja) | ビデオ信号圧縮処理方法 | |
JP3371191B2 (ja) | 画像信号の符号化方法及び復号方法、並びに、符号化装置及び復号装置 | |
JP2005278207A (ja) | 編集装置および方法、再符号化装置および方法 | |
JP2002118848A (ja) | 映像切換装置および映像切換方法 | |
Heitmann | The Application of MPEG-2 MP@ ML within TV-Centers-Mandatory, Useful or a Nuisance? |