ES2582664T3 - Decodificador de datos de vídeo y procedimiento de descodificación de datos de vídeo con sincronización de la presentación de los subtítulos - Google Patents

Decodificador de datos de vídeo y procedimiento de descodificación de datos de vídeo con sincronización de la presentación de los subtítulos Download PDF

Info

Publication number
ES2582664T3
ES2582664T3 ES08870754.2T ES08870754T ES2582664T3 ES 2582664 T3 ES2582664 T3 ES 2582664T3 ES 08870754 T ES08870754 T ES 08870754T ES 2582664 T3 ES2582664 T3 ES 2582664T3
Authority
ES
Spain
Prior art keywords
data
subtitling
buffer
decoder
presentation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
ES08870754.2T
Other languages
English (en)
Inventor
Mickaël LEGRAND
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sagemcom Broadband SAS
Original Assignee
Sagemcom Broadband SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sagemcom Broadband SAS filed Critical Sagemcom Broadband SAS
Application granted granted Critical
Publication of ES2582664T3 publication Critical patent/ES2582664T3/es
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4382—Demodulation or channel decoding, e.g. QPSK demodulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Television Systems (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Studio Circuits (AREA)

Abstract

Decodificador (1) de datos de vídeo y de datos de subtitulación asociados a dichos datos de vídeo, proviniendo dichos datos de un flujo de datos (F) que además incluye referencias temporales en sincronismo con un reloj que ha servido para temporizar la codificación de dichos datos, incluyendo dicho decodificador (1) - un espacio de almacenamiento (3), estando grabados dichos datos de vídeo y de subtitulación, en forma multiplexada, en dicho espacio de almacenamiento (3), - una primera memoria intermedia (5) que funciona en modo "primero en entrar - primero en salir" y apta para contener provisionalmente dichos datos de vídeo en forma de paquetes (P1), - una segunda memoria intermedia (6) que funciona en modo "primero en entrar - primero en salir" y apta para contener provisionalmente dichos datos de subtitulación en forma de paquetes (P3), - un demultiplexador (4) para emitir dichos datos de vídeo y dichos datos de subtitulación respectivamente hacia dicha primera y dicha segunda memoria intermedia (5, 6), - un reloj local (15), estando dicho decodificador (1) caracterizado por que dicho espacio de almacenamiento (3) incluye medios (16) para almacenar dichas referencias temporales, de modo que dicho demultiplexador (4) transmite asimismo dichas referencias temporales, incluyendo dicho decodificador (1) medios (10) para generar una marca de tiempo de presentación asociada a cada paquete de datos de subtitulación (P3) que inicialmente no contiene marca de tiempo de presentación, determinándose dicha marca de tiempo de presentación a partir de un valor de referencia temporal emitido por dicho demultiplexador (4) y que permite sincronizar la presentación de dichos paquetes de datos de subtitulación (P3) con respecto a dicho reloj local (15).

Description

5
10
15
20
25
30
35
40
45
50
55
DESCRIPCION
Decodificador de datos de video y procedimiento de descodificacion de datos de video con sincronizacion de la presentacion de los subtitulos
Campo tecnico de la invencion
La presente invencion se refiere a un decodificador de datos de video y a un procedimiento de descodificacion de estos datos. La invencion es de aplicacion al campo de los decodificadores de television digital encaminados a descodificar datos de video y que incluyen medios de sincronizacion de los datos de video, de los datos de subtitulacion y de datos de audio (cuando estan presentes estos ultimos), estando grabados estos datos en un espacio de almacenamiento (del tipo disco duro) en forma multiplexada. Se hace notar que el termino “subtitulacion” utilizado en lo sucesivo designa todo tipo de datos de texto destinados a acompanar a los datos de video; pueden ser, por ejemplo, subtitulos definidos segun la norma DVB (por “Digital Video Broadcasting” en ingles), pero tambien datos que utilizan la norma teletexto (transportados en paquetes DVB, por ejemplo).
Antecedentes tecnologicos de la invencion
En un decodificador de television digital que incluye un disco duro, se pueden almacenar en el disco duro, en forma de flujo parcial, diferentes flujos de tipo audio, video y teletexto / subtitulos, tales como se describen especialmente en las normas DVB, con el fin de ser reproducidos nuevamente y descodificados con posterioridad.
Estos diferentes flujos suelen transportarse en un flujo de transporte que utiliza, por ejemplo, la norma DVB, desmultiplexarse mediante un demultiplexador y, respectivamente, transmitirse a decodificadores elementales para descodificaciones de audio, video, teletexto o subtitulos. Los flujos transmitidos a un organo de descodificacion pueden estar destinados a ser utilizados de manera sincrona. Este es el caso, por ejemplo, de las informaciones de audio y video que estan vinculadas entre si mediante informaciones de sincronizacion temporal en forma de marcas de tiempo de presentacion o PTS (“Presentation Time Stamps” en ingles). El empleo de estas informaciones, combinado con la actualizacion de un reloj local STC (“System Time Clock” en ingles) por medio de senales de referencia temporal denotadas por PCR (por “Program Clock Reference” en ingles) permite presentar en pantalla imagenes de manera sincrona con el sonido. Las referencias temporales PCR se insertan en el flujo de datos en sincronismo con un reloj que temporiza la codificacion de los datos. Estas permiten generar, con el concurso de un sintetizador de frecuencias o de un oscilador controlado por tension, denotado por VCXO (por “Voltage Controlled Crystal Oscillator”), en el lado de descodificacion, el reloj STC. Las marcas de tiempo PTS permiten sincronizar la presentacion de los paquetes de datos con respecto al reloj STC. Aunque la descodificacion de video y la descodificacion de audio sean procesos separados, cada paquete de video y cada paquete de audio estan sincronizados con el reloj STC, de modo que estos son presentados en un mismo instante determinado. Dicho de otro modo, los paquetes de video y los paquetes de audio estan sincronizados cada uno de ellos con el reloj STC y, por lo tanto, estan sincronizados entre si. Este metodo es bien conocido y se implementa en los decodificadores digitales.
Se hace notar que la transmision de las informaciones de sincronizacion PTS no es obligatoria en el caso de los datos de subtitulacion / teletexto. La sincronizacion para tales datos, cuya necesidad es bastante menos precisa que en el caso del audio, se realiza mediante una descodificacion practicamente inmediata (un maximo de algunas decenas de ms) de los datos recibidos a la salida del demultiplexador. En consecuencia, en el ambito del empleo de flujos de subtitulos en modo de descodificacion directa partiendo de una senal de antena, la presencia o no de informaciones de sincronizacion en estos flujos carece de mayor interes, bastando la consideration de un error medio para ganar precision.
No obstante, la puesta en practica de tal solution plantea un cierto numero de dificultades en el caso de un decodificador que incluye un espacio de almacenamiento de datos.
De este modo, el principio utilizado generalmente en la nueva lectura de datos nuevamente reproducidos de un espacio de almacenamiento consiste en guardar en memoria intermedia (es decir, poner en memoria intermedia) los datos utilizados, especialmente llenando al maximo la memoria intermedia de datos de video. En lo sucesivo, se utilizara indistintamente el termino “memoria intermedia” o el termino “bufer”. Los buferes utilizados son del tipo “primero en entrar - primero en salir”, FIFO (“First In First Out” en ingles). De esta manera, un ocasional defecto de lectura en el espacio de almacenamiento (tal como un error de lectura en disco, por ejemplo) que conlleve una demora en la lectura de estos datos no resulta visible. De este modo, se proporciona al demultiplexador el conjunto de los datos de audio, video, subtitulos nuevamente leidos a partir de un espacio de almacenamiento, con un control automatico dirigido por el nivel de llenado del bufer de descodificacion de video.
En el caso en que, para los subtitulos, no se implementa ninguna marca de tiempo PTS antes del envio, estos son descodificados en cuanto estan disponibles a la salida del demultiplexador, de la misma manera que en reception directa. Por lo tanto, cabe el riesgo de que en el bufer de descodificacion de video haya presentes datos de video aun sin descodificar mientras que los correspondientes subtitulos ya se estan presentando en pantalla. En la practica, el tamano del bufer de descodificacion de video y las velocidades de transmision de compresion de video habituales son tales que es posible tener varios segundos de diferencia entre estos subtitulos y la imagen aun sin
5
10
15
20
25
30
35
40
45
50
descodificar. Entonces, la coherencia de presentacion en pantalla de los subtltuios con respecto al video se ve seriamente comprometida. Consecuentemente, se concibe perfectamente que el hecho de reproducir inmediatamente (sin puesta en memoria intermedia) los subtltulos sin marca de tiempo de presentacion PTS no plantea mayor problema cuando los datos son reproducidos en “live”, pero que esta ausencia de almacenamiento en bufer plantea serios problemas en caso de lectura de los datos a partir de un disco duro incorporado al decodificador. Se hace notar que el termino “live” utilizado en lo sucesivo designa una visualization en directo, a partir del flujo y no a partir del disco duro.
Adicionalmente, en ausencia de marcas de tiempo de presentacion asociadas a los datos de subtitulacion, los problemas antes referidos se ven aun mas incrementados en modo camara lenta, por cuanto que el retardo entre la presentacion en pantalla de los subtltulos y la de las imagenes de video es aun mas grande.
Descripcion general de la invencion
En este contexto, la presente invencion esta orientada a proporcionar un decodificador de datos de video y de datos de subtitulacion asociados a dichos datos de video provenientes de un espacio de almacenamiento, que permite sincronizar los datos de video y los datos de subtitulacion de manera eficaz, simple y economica.
Para este fin, la invencion propone un decodificador de datos de video y de datos de subtitulacion asociados a dichos datos de video, proviniendo dichos datos de un flujo de datos que ademas incluye referencias temporales PCR en sincronismo con un reloj que ha servido para temporizar la codification de dichos datos, incluyendo dicho decodificador
- un espacio de almacenamiento, estando grabados dichos datos de video y de subtitulacion, en forma multiplexada, en dicho espacio de almacenamiento,
- una primera memoria intermedia que funciona en modo “primero en entrar - primero en salir” y apta para recibir dichos datos de video en forma de paquetes,
- una segunda memoria intermedia que funciona en modo “primero en entrar - primero en salir” y apta para recibir dichos datos de subtitulacion en forma de paquetes,
- un demultiplexador para emitir dichos datos de video y dichos datos de subtitulacion respectivamente hacia dicha primera y dicha segunda memoria intermedia,
- un reloj local,
estando dicho decodificador caracterizado por que dicho espacio de almacenamiento incluye medios para almacenar dichas referencias temporales, de modo que dicho demultiplexador transmite asimismo dichas referencias temporales, incluyendo dicho decodificador medios para generar una marca de tiempo de presentacion asociada a cada paquete de datos de subtitulacion que inicialmente no contiene marca de tiempo de presentacion, determinandose dicha marca de tiempo de presentacion a partir de un valor de referencia temporal emitido por dicho demultiplexador y que permite sincronizar la presentacion de dichos paquetes de datos de subtitulacion con respecto a dicho reloj local.
Merced a la invencion, se asocia a cada paquete de subtitulacion que no posee marca de tiempo PTS (que permite la sincronizacion) una marca de tiempo reconstruida; esta marca de tiempo reconstruida se genera a partir de una referencia temporal PCR. Por lo tanto, la invencion permite, en una lectura en disco, sincronizar los subtltulos aun si estos no contienen PTS, es decir, aun si no han sido previstos para tal fin.
El dispositivo segun la invencion puede presentar asimismo una o varias de las caracteristicas que siguen, consideradas individualmente o segun todas las combinaciones tecnicamente posibles.
De acuerdo con una primera forma de realization preferente, el decodificador segun la invencion incluye medios de memorization de una variable de referencia temporal igual a la ultima referencia temporal recibida de dicho multiplexador, fijando dichos medios para generar una marca de tiempo de presentacion el valor de dicha marca de tiempo de presentacion de cada paquete de datos de subtitulacion recibido en dicha segunda memoria intermedia en el valor actual de dicha variable de referencia temporal.
De acuerdo con una segunda forma de realizacion, el decodificador segun la invencion incluye medios de memorizacion de una variable de referencia temporal igual a la ultima referencia temporal recibida de dicho multiplexador, fijando dichos medios para generar una marca de tiempo de presentacion el valor de dicha marca de tiempo de presentacion de cada paquete de datos de subtitulacion recibido en dicha segunda memoria intermedia en el valor que sigue al valor actual de dicha variable de referencia temporal en el momento de la reception de dicho paquete en dicha segunda memoria intermedia.
De acuerdo con una tercera forma de realizacion, el decodificador segun la invencion incluye medios de memorizacion de una variable de referencia temporal igual a la ultima referencia temporal recibida de dicho multiplexador, fijando dichos medios para generar una marca de tiempo de presentacion el valor de dicha marca de
5
10
15
20
25
30
35
40
45
50
tiempo de presentacion de cada paquete de datos de subtitulacion recibido en dicha segunda memoria intermedia en una combinacion del valor actual de dicha variable de referencia temporal y del valor que sigue al valor actual de dicha variable de referencia temporal en el momento de la recepcion de dicho paquete en dicha segunda memoria intermedia.
De manera particularmente ventajosa, el decodificador segun la invention incluye una tercera memoria intermedia que funciona en modo “primero en entrar - primero en salir” y apta para contener provisionalmente dichas marcas de tiempo de presentacion generadas, conteniendo dicha tercera memoria intermedia tantas marcas de tiempo como el numero de paquetes de datos de subtitulacion que no conteniendo inicialmente marca de tiempo de presentacion se encuentren en dicha segunda memoria intermedia.
De acuerdo con una forma de realization, dichos datos de video y de subtitulacion estan almacenados en dicho espacio de almacenamiento en un formato DVB.
Preferiblemente, el decodificador segun la invencion incluye una cuarta memoria intermedia que funciona en modo “primero en entrar - primero en salir” y apta para contener provisionalmente datos de audio, proviniendo igualmente dichos datos de audio de dicho flujo de datos que ademas incluye los datos de video, los datos de subtitulacion y las referencias temporales.
Ventajosamente, el decodificador segun la invencion es un decodificador de television digital.
Es tambien objeto de la presente invencion un procedimiento de descodificacion de datos de video y de datos de subtitulacion asociados a dichos datos de video, proviniendo dichos datos de un flujo de datos que ademas incluye referencias temporales en sincronismo con un reloj que ha servido para temporizar la codification de dichos datos, estando grabados dichos datos de video, de subtitulacion y dichas referencias temporales, en forma multiplexada, en un espacio de almacenamiento, incluyendo dicho procedimiento las siguientes etapas:
- demultiplexacion de dichos datos de video, de dichos datos de subtitulacion y de dichas referencias temporales,
- puesta en una primera memoria intermedia que funciona en modo “primero en entrar - primero en salir” de dichos datos de video en forma de paquetes,
- puesta en una segunda memoria intermedia que funciona en modo “primero en entrar - primero en salir” de dichos datos de subtitulacion en forma de paquetes,
- memorization de una variable de referencia temporal igual a la ultima referencia temporal recibida de dicho multiplexador,
- puesta en una tercera memoria intermedia que funciona en modo “primero en entrar - primero en salir” de una marca de tiempo de presentacion asociada a cada paquete de datos de subtitulacion entrante en dicha segunda memoria intermedia y que inicialmente no contiene marca de tiempo de presentacion, siendo dicha marca de tiempo igual al valor de la ultima referencia temporal memorizada y permitiendo sincronizar la presentacion de dichos paquetes de subtitulacion con respecto a un reloj local.
Breve descripcion de las figuras
Otras caracterlsticas y ventajas de la invencion se desprenderan claramente de la descripcion que de la misma se da a continuation, a tltulo indicativo y sin caracter limitativo alguno, con referencia a la figura 1 que se acompana, que es una representation esquematica simplificada de un decodificador segun la invencion para la puesta en practica del procedimiento de codificacion segun la invencion.
Descripcion de los modos preferidos de realizacion de la invencion
La figura 1 representa esquematicamente un decodificador de television digital 1 previsto para recibir flujos de datos F (utilizando, por ejemplo, una norma del tipo DVB). El decodificador 1 permite no solo difundir directamente (en “live”) los programas audiovisuales para el telespectador o grabarlos en un espacio de almacenamiento, tal como un disco duro 3, para as! hacerlos accesibles posteriormente al telespectador. Se hace notar que la figura 1 tan solo representa las funcionalidades relativas a la forma de realizacion vinculada al almacenamiento de los datos.
El decodificador 1 incluye:
- un modulo de recepcion 2 del flujo de datos F,
- el disco duro 3,
- un demultiplexador 4,
- cuatro memorias intermedias 5, 6, 7 y 8,
5
10
15
20
25
30
35
40
45
50
- tres decodificadores 11, 12 y 13 respectivamente previstos para descodificar los datos de video, de audio y
de subtitulacion.
Cada una de las memorias intermedias 5, 6, 7 y 8 es un bufer de tipo “primero en entrar - primero en salir”, FIFO (“First In First Out”).
El flujo de datos F, tras la recepcion por el modulo de recepcion 2, se almacena en el disco duro 3.
El flujo F incluye un conjunto de datos de video, de audio y de subtitulacion. El flujo F incluye asimismo senales de referencia temporal denotadas por PCR (por “Program Clock Reference”). Estas referencias temporales PCR se insertan en el flujo de datos en sincronismo con un reloj que temporiza la codificacion de los datos. En lectura “live”, las PCR permiten generar, con el concurso de un sintetizador de frecuencias o de un oscilador controlado por tension, denotado por VCXO (por “Voltage Controlled Crystal Oscillator”), en el lado de descodificacion, un reloj de sincronizacion STC. En el caso de una lectura a partir del disco duro 3, las referencias temporales no se utilizan para generar el reloj STC: el disco duro 3 incluye, no obstante, medios 16 para conservar en memoria las referencias PCR incorporadas al flujo F.
Tal como hemos explicado con referencia al estado de la tecnica, las informaciones de audio y de video incluyen, cada una de ellas, informaciones de sincronizacion temporal en forma de marcas de tiempo de presentacion o PTS (“Presentation Time Stamps” en ingles). De este modo, tras la demultiplexacion del flujo F por parte del demultiplexador 4, los paquetes de datos de video P1 que incluyen cada uno de ellos una marca de tiempo PTS se envian hacia la memoria intermedia 5. Igualmente, los paquetes de datos de audio P2 que incluyen cada uno de ellos una marca de tiempo PTS se envian hacia la memoria intermedia 8.
El decodificador 1 incluye asimismo un reloj local STC 15 (“System Time Clock” en ingles) de sincronizacion y medios 14 para generar dicho reloj STC 15. La manera de generar el reloj STC 15 es diferente segun que se este en “live” o en lectura del disco duro 3.
De este modo, tal como hemos explicado con referencia al estado de la tecnica, en live, se genera el reloj STC merced a las referencias temporales PCR recibidas en el flujo, y los paquetes de video y de audio se sincronizan al reloj STC (es decir, las marcas de tiempo PTS de los paquetes recibidos son comparadas con el reloj STC para conocer el momento adecuado para reproducir el paquete de datos).
En lectura en disco, puesto que el flujo llega a una velocidad artificial, las referencias temporales PCR no son valores fiables. Consiguientemente, los paquetes de video no estan sincronizados y, por tanto, el decodificador de video 11 ya no va a tener en cuenta la marca de tiempo PTS presente en cada paquete de video; en cambio, el decodificador de video 11 va a informar a los medios de generacion 14 del reloj STC 15 del valor de la marca de tiempo PTS asociada a cada imagen presentada en pantalla. Esta marca de tiempo PTS va a servir a continuacion para generar el reloj local STC 15. Al igual que en “live”, los paquetes de audio, por su parte, van a sincronizarse al reloj 15. Este procedimiento es un procedimiento conocido con el nombre de “video master”.
Se hace notar que tambien cabe la posibilidad de utilizar las marcas de tiempo PTS de los paquetes de audio para generar el reloj STC. Este procedimiento se conoce con el nombre de “audio master”.
Tal como hemos dicho antes, la transmision de las informaciones de sincronizacion PTS no es obligatoria en el caso de los datos de subtitulacion / teletexto. Con objeto de ilustrar la invencion, en este punto expondremos unicamente el caso de paquetes de subtitulacion P3 que no incluyen marcas de tiempo PTS (la ausencia de PTS queda ilustrada mediante la presencia de X en los paquetes P3). Estos paquetes P3 son transmitidos por el demultiplexador 4 hacia la memoria intermedia 6.
El decodificador 1 incluye medios de memorizacion 9 de una variable de referencia temporal igual a la ultima referencia temporal PCR recibida del multiplexador 4: dicho de otro modo, los medios 9 permiten tener acceso permanente al ultimo valor de la PCR.
El decodificador 1 incluye asimismo medios 10 para generar una marca de tiempo de presentacion asociada a cada paquete de datos de subtitulacion P3 recibido en la memoria intermedia 6.
De este modo, con cada recepcion de un paquete P3 en la memoria intermedia 6, los medios 10 van a consultar los medios de memorizacion 9, y fijan el valor de marca de tiempo asociada al paquete P3 en el ultimo valor recibido de la PCR (es decir, el valor actual de la variable de referencia temporal). Asi, se crea una marca de tiempo virtual (o reconstruida) PTSV igual al ultimo valor recibido de cada valor de referencia PCR.
Cada una de las marcas de tiempo PTSV se introduce en la memoria intermedia 7.
Se comprende perfectamente que la memoria intermedia 6 de paquetes de subtitulacion comprende tantos paquetes de subtitulacion sin marcas de tiempo STC como el numero de marcas de tiempo virtuales PTSV contenidas en la memoria intermedia 7.
La presencia de una marca de tiempo asociada al paquete de subtitulacion permite al decodificador de datos de
5
10
15
20
25
subtitulacion 13 sincronizar los datos de subtitulacion al reloj local STC 15.
Se hace notar que las referencias PCR llegan con mucha mas frecuencia (al menos cada 100 ms en la norma DVB) que los paquetes de subtltulos. Consecuentemente, se pone claramente de manifiesto que cada marca de tiempo virtual PTSV tomara un valor diferente de PCR y que numerosos valores de PCR no seran utilizados por los medios de generacion 10 de las PTSV.
El bufer de datos de video 5 se establece para estar constantemente lleno, induciendo en consecuencia una demora de varios segundos (el valor de esta demora es directamente dependiente del tamano del bufer de video 5 y de la velocidad de transmision de video) entre la entrada de un paquete y su salida. Consecuentemente, la hora dada por una referencia PCR que se acaba de recibir esta adelantada unos segundos con respecto al reloj local STC 15 generado a partir de las imagenes de video provenientes del decodificador 11. Por consecuencia, el hecho de asignar el valor de la ultima PCR recibida a la marca de tiempo de cada paquete de subtitulacion constituye una buena aproximacion y permite obtener un resultado practicamente tan sincronizado como en lectura “live”.
Por supuesto, la invention no queda limitada a la forma de realization que se acaba de describir.
En especial, los medios representados en la figura 1 son unidades funcionales que pueden o no corresponderse con unidades fisicamente distinguibles. Por ejemplo, estos medios pueden estar reunidos en un unico componente, o constituir funcionalidades de un mismo equipo logico. Por el contrario, algunos medios pueden componerse ocasionalmente de entidades fisicas separadas.
Adicionalmente, hemos descrito una forma de realizacion en la que el valor de la marca de tiempo virtual esta fijado en el valor de la ultima referencia PCR recibida. No obstante, cabe contemplar utilizar otro valor de PCR que no sea el ultimo recibido. Este puede ser, por ejemplo, la referencia recibida inmediatamente despues de la reception del paquete de subtitulacion o una combination (promedio) del ultimo valor recibido y del proximo valor recibido.
Por otro lado, hemos indicado la presencia de un bufer destinado a almacenar las marcas de tiempo virtuales PTSV. Se contempla asimismo la posibilidad de modificar el paquete de subtitulacion (incrementando especialmente su tamano) aguas arriba de su entrada en la memoria intermedia de datos de subtitulacion con el fin de agregarle directamente la marca de tiempo virtual PTSV.
Finalmente, se podra sustituir cualquier medio por un medio equivalente.

Claims (9)

  1. 5
    10
    15
    20
    25
    30
    35
    40
    45
    50
    REIVINDICACIONES
    1. Decodificador (1) de datos de video y de datos de subtitulacion asociados a dichos datos de video, proviniendo dichos datos de un flujo de datos (F) que ademas incluye referencias temporales en sincronismo con un reloj que ha servido para temporizar la codificacion de dichos datos, incluyendo dicho decodificador (1)
    - un espacio de almacenamiento (3), estando grabados dichos datos de video y de subtitulacion, en forma multiplexada, en dicho espacio de almacenamiento (3),
    - una primera memoria intermedia (5) que funciona en modo “primero en entrar - primero en salir” y apta para contener provisionalmente dichos datos de video en forma de paquetes (P1),
    - una segunda memoria intermedia (6) que funciona en modo “primero en entrar - primero en salir” y apta para contener provisionalmente dichos datos de subtitulacion en forma de paquetes (P3),
    - un demultiplexador (4) para emitir dichos datos de video y dichos datos de subtitulacion respectivamente hacia dicha primera y dicha segunda memoria intermedia (5, 6),
    - un reloj local (15),
    estando dicho decodificador (1) caracterizado por que dicho espacio de almacenamiento (3) incluye medios (16) para almacenar dichas referencias temporales, de modo que dicho demultiplexador (4) transmite asimismo dichas referencias temporales, incluyendo dicho decodificador (1) medios (10) para generar una marca de tiempo de presentacion asociada a cada paquete de datos de subtitulacion (P3) que inicialmente no contiene marca de tiempo de presentacion, determinandose dicha marca de tiempo de presentacion a partir de un valor de referencia temporal emitido por dicho demultiplexador (4) y que permite sincronizar la presentacion de dichos paquetes de datos de subtitulacion (P3) con respecto a dicho reloj local (15).
  2. 2. Decodificador (1) segun la reivindicacion 1, caracterizado por que incluye medios de memorizacion (9) de una variable de referencia temporal igual a la ultima referencia temporal recibida de dicho multiplexador (4), fijando dichos medios (9) para generar una marca de tiempo de presentacion el valor de dicha marca de tiempo de presentacion de cada paquete de datos de subtitulacion (P3) recibido en dicha segunda memoria intermedia en el valor actual de dicha variable de referencia temporal.
  3. 3. Decodificador segun la reivindicacion 1, caracterizado por que incluye medios de memorizacion de una variable de referencia temporal igual a la ultima referencia temporal recibida de dicho multiplexador, fijando dichos medios para generar una marca de tiempo de presentacion el valor de dicha marca de tiempo de presentacion de cada paquete de datos de subtitulacion recibido en dicha segunda memoria intermedia en el valor que sigue al valor actual de dicha variable de referencia temporal en el momento de la recepcion de dicho paquete en dicha segunda memoria intermedia.
  4. 4. Decodificador segun la reivindicacion 1, caracterizado por que incluye medios de memorizacion de una variable de referencia temporal igual a la ultima referencia temporal recibida de dicho multiplexador, fijando dichos medios para generar una marca de tiempo de presentacion el valor de dicha marca de tiempo de presentacion de cada paquete de datos de subtitulacion recibido en dicha segunda memoria intermedia en una combinacion del valor actual de dicha variable de referencia temporal y del valor que sigue al valor actual de dicha variable de referencia temporal en el momento de la recepcion de dicho paquete en dicha segunda memoria intermedia.
  5. 5. Decodificador (1) segun una de las anteriores reivindicaciones, caracterizado por que incluye una tercera memoria intermedia (7) que funciona en modo “primero en entrar - primero en salir” y apta para contener provisionalmente dichas marcas de tiempo de presentacion generadas, conteniendo dicha tercera memoria intermedia (7) tantas marcas de tiempo como el numero de paquetes de datos de subtitulacion (P3) que no conteniendo inicialmente marca de tiempo de presentacion se encuentren en dicha segunda memoria intermedia (6).
  6. 6. Decodificador (1) segun una de las anteriores reivindicaciones, caracterizado por que dicho espacio de almacenamiento esta previsto para que dichos datos de video y de subtitulacion sean almacenados en un formato DVB.
  7. 7. Decodificador (1) segun una de las anteriores reivindicaciones, caracterizado por que incluye una cuarta memoria intermedia (8) que funciona en modo “primero en entrar - primero en salir” y apta para contener provisionalmente datos de audio, proviniendo igualmente dichos datos de audio de dicho flujo de datos (F) que ademas incluye los datos de video, los datos de subtitulacion y las referencias temporales.
  8. 8. Decodificador (1) segun una de las anteriores reivindicaciones, caracterizado por que dicho decodificador es un decodificador de television digital.
  9. 9. Procedimiento de descodificacion de datos de video y de datos de subtitulacion asociados a dichos datos de video, proviniendo dichos datos de un flujo de datos que ademas incluye referencias temporales en sincronismo con un reloj que ha servido para temporizar la codificacion de dichos datos, estando grabados dichos datos de
    10
    15
    video, de subtitulacion y dichas referencias temporales, en forma multiplexada, en un espacio de almacenamiento,
    incluyendo dicho procedimiento las siguientes etapas:
    - demultiplexacion de dichos datos de video, de dichos datos de subtitulacion y de dichas referencias temporales,
    - puesta en una primera memoria intermedia que funciona en modo “primero en entrar - primero en salir” de dichos datos de video en forma de paquetes,
    - puesta en una segunda memoria intermedia que funciona en modo “primero en entrar - primero en salir” de dichos datos de subtitulacion en forma de paquetes,
    y caracterizado por
    - memorizacion de una variable de referencia temporal igual a la ultima referencia temporal recibida de dicho multiplexador,
    - puesta en una tercera memoria intermedia que funciona en modo “primero en entrar - primero en salir” de una marca de tiempo de presentacion asociada a cada paquete de datos de subtitulacion entrante en dicha segunda memoria intermedia y que inicialmente no contiene marca de tiempo de presentacion, siendo dicha marca de tiempo igual al valor de la ultima referencia temporal memorizada y permitiendo sincronizar la presentacion de dichos paquetes de subtitulacion con respecto a un reloj local.
ES08870754.2T 2008-01-18 2008-12-31 Decodificador de datos de vídeo y procedimiento de descodificación de datos de vídeo con sincronización de la presentación de los subtítulos Active ES2582664T3 (es)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR0850347 2008-01-18
FR0850347A FR2926694B1 (fr) 2008-01-18 2008-01-18 Decodeur de donnees video et procede de decodage de donnees video
PCT/FR2008/052436 WO2009090353A2 (fr) 2008-01-18 2008-12-31 Décodeur de données vidéo et procédé de décodage de données vidéo

Publications (1)

Publication Number Publication Date
ES2582664T3 true ES2582664T3 (es) 2016-09-14

Family

ID=39731626

Family Applications (1)

Application Number Title Priority Date Filing Date
ES08870754.2T Active ES2582664T3 (es) 2008-01-18 2008-12-31 Decodificador de datos de vídeo y procedimiento de descodificación de datos de vídeo con sincronización de la presentación de los subtítulos

Country Status (8)

Country Link
US (1) US8750389B2 (es)
EP (1) EP2232881B1 (es)
CN (1) CN101933332B (es)
BR (1) BRPI0822043B1 (es)
CO (1) CO6331398A2 (es)
ES (1) ES2582664T3 (es)
FR (1) FR2926694B1 (es)
WO (1) WO2009090353A2 (es)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102655571A (zh) * 2011-03-01 2012-09-05 上海清鹤数码科技有限公司 基于嵌入式平台的数字电视流媒体中间件多字幕显示组件
CN105959769A (zh) * 2013-05-15 2016-09-21 蔡留凤 一种超高清数字电视接收机的工作方法
KR101960350B1 (ko) * 2015-06-17 2019-03-20 주식회사 엘지화학 폴리프로필렌 수지 조성물 및 이로 피복된 케이블
US11223852B2 (en) 2016-03-21 2022-01-11 Qualcomm Incorporated Coding video data using a two-level multi-type-tree framework
US10848788B2 (en) 2017-01-06 2020-11-24 Qualcomm Incorporated Multi-type-tree framework for video coding
WO2018202907A1 (en) 2017-05-05 2018-11-08 Telefonaktiebolaget Lm Ericsson (Publ) A method and device in a radio network
CN108111872B (zh) * 2018-01-09 2021-01-01 武汉斗鱼网络科技有限公司 一种音频直播系统
WO2021177478A1 (ko) * 2020-03-02 2021-09-10 엘지전자 주식회사 신호 처리 장치, 및 이를 구비하는 영상표시장치

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3816571B2 (ja) * 1996-03-15 2006-08-30 パイオニア株式会社 情報記録装置及び情報記録方法並びに情報再生装置及び情報再生方法
FR2797549B1 (fr) * 1999-08-13 2001-09-21 Thomson Multimedia Sa Procede et dispositif de synchronisation d'un decodeur mpeg
US7130316B2 (en) * 2001-04-11 2006-10-31 Ati Technologies, Inc. System for frame based audio synchronization and method thereof
JP2003169292A (ja) * 2001-11-30 2003-06-13 Victor Co Of Japan Ltd アフレコ装置、コンピュータプログラム、記録媒体、伝送方法及び再生装置
US7315622B2 (en) * 2002-06-27 2008-01-01 Nxp B.V. Robust method for achieving audio/video synchronization in MPEG decoders in personal video recording applications
FR2850820B1 (fr) * 2003-01-31 2005-06-03 Thomson Licensing Sa Dispositif et procede de synchronisation en lecture de donnees video et de donnees annexes et produits associes
KR100716973B1 (ko) * 2004-02-21 2007-05-10 삼성전자주식회사 Ａｖ 데이터에 동기된 텍스트 서브 타이틀 데이터를기록한 정보저장매체, 재생방법 및 장치
US20060212902A1 (en) * 2004-12-14 2006-09-21 Samsung Electronics Co., Ltd. Device and method for displaying broadcasting information in digital broadcasting receiver
JP4762052B2 (ja) * 2006-05-31 2011-08-31 パナソニック株式会社 ストリームデータ処理装置及びストリームデータ処理方法
CN100438634C (zh) * 2006-07-14 2008-11-26 杭州国芯科技有限公司 视音频同步方法

Also Published As

Publication number Publication date
CN101933332B (zh) 2013-03-20
BRPI0822043A2 (pt) 2015-10-13
CO6331398A2 (es) 2011-10-20
WO2009090353A2 (fr) 2009-07-23
FR2926694A1 (fr) 2009-07-24
EP2232881B1 (fr) 2016-05-25
FR2926694B1 (fr) 2010-04-16
US20110026602A1 (en) 2011-02-03
BRPI0822043B1 (pt) 2020-09-24
US8750389B2 (en) 2014-06-10
EP2232881A2 (fr) 2010-09-29
CN101933332A (zh) 2010-12-29
WO2009090353A3 (fr) 2010-03-25

Similar Documents

Publication Publication Date Title
ES2582664T3 (es) Decodificador de datos de vídeo y procedimiento de descodificación de datos de vídeo con sincronización de la presentación de los subtítulos
TW448694B (en) Auxiliary data insertion in a transport datastream
KR100782835B1 (ko) 캡션 정보의 출력시점 및 출력 우선순위를 조절하는 방법및 그 장치
US10129587B2 (en) Fast switching of synchronized media using time-stamp management
US8233780B2 (en) Reproducing apparatus and method, and recording medium
BR112013013994A2 (pt) aparelho de recepção, aparelho de transmissão, e método para reproduzir conteúdo de multimídia.
US20130219444A1 (en) Receiving apparatus and subtitle processing method
KR20050083258A (ko) Ａｖ 데이터에 동기된 텍스트 서브 타이틀 데이터를기록한 정보저장매체, 재생방법 및 장치
ES2389909T3 (es) Dispositivo de reproducción de información, método de control de memoria intermedia, y programa
ES2277150T3 (es) Reproduccion trucada de television interactiva por interfaz digital.
BR112014003343B1 (pt) Aparelho de recepção e método de recepção do mesmo
KR20110138151A (ko) 자막 서비스를 포함하는 디지털 방송 서비스를 제공하기 위한 비디오 데이터스트림 전송 방법 및 그 장치, 자막 서비스를 포함하는 디지털 방송 서비스를 제공하는 비디오 데이터스트림 수신 방법 및 그 장치
CA2490879C (en) Reproducing apparatus and method, and recording medium
JP6964436B2 (ja) 映像記録装置及び映像再生装置
JP2006020102A (ja) 放送記録再生装置および放送記録再生処理プログラム
EP0980185A1 (en) Auxiliary data insertion in a transport datastream
KR20130040156A (ko) 콘텐츠 디스플레이 방법, 콘텐츠 동기화 방법, 방송 콘텐츠 디스플레이 방법 및 디스플레이 장치
KR100708139B1 (ko) 방송 프로그램을 저장하고 재생하는 장치 및 방법
JP2010141498A (ja) 映像受信装置及び映像送信装置
CA2725179C (en) Reproducing apparatus and method, and recording medium
KR970076499A (ko) 디지탈 영상 기록 재생 장치
JP2006135942A (ja) 字幕隠蔽放送に係る送信装置、再生装置、それらの方法
JP2006180091A (ja) コンテンツ合成装置及び方法
JP2019149790A (ja) 記録装置、再生装置、変換装置、送信装置、記録方法、再生方法、変換方法、及び、ストリームデータのデータ構造
EP2232855A2 (en) Device and method for receiving video data packets