FR2742288A1 - Synchronisation de signaux audio et video de systeme mpeg, decodeur, et procede associe - Google Patents

Synchronisation de signaux audio et video de systeme mpeg, decodeur, et procede associe Download PDF

Info

Publication number
FR2742288A1
FR2742288A1 FR9615100A FR9615100A FR2742288A1 FR 2742288 A1 FR2742288 A1 FR 2742288A1 FR 9615100 A FR9615100 A FR 9615100A FR 9615100 A FR9615100 A FR 9615100A FR 2742288 A1 FR2742288 A1 FR 2742288A1
Authority
FR
France
Prior art keywords
audio
video
data
buffer
decoder
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
FR9615100A
Other languages
English (en)
Other versions
FR2742288B1 (fr
Inventor
Seong Jin Moon
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of FR2742288A1 publication Critical patent/FR2742288A1/fr
Application granted granted Critical
Publication of FR2742288B1 publication Critical patent/FR2742288B1/fr
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4392Processing of audio elementary streams involving audio buffer management
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Television Signal Processing For Recording (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Synchronisation In Digital Transmission Systems (AREA)

Abstract

Dispositlif de commande de tampons audio et vidéo pour système MPEG comportant un décodeur (200) séparant une séquence reçue de données en séquences audio et vidéo et recevant des références d'horloge (SCR), un tampon audio (210) mémorisant la séquence audio et l'émettant selon des signaux d'horloge audio et de commande d'émission, un tampon vidéo (220) mémorisant la séquence vidéo et l'émettant selon des signaux d'horloge de sortie vidéo et de commande d'émission, une commande d'entrée de données (240) commandant la quantité de données envoyées au décodeur du système selon une quantité de données de tampon audio, et une commande d'entrée et de sortie de tampons (230) produisant des signaux d'horloge d'entrée et sortie des tampons audio et vidéo et mesurant la quantité de données du tampon audio. L'invention concerne aussi un dispositif de synchronisation, un décodeur et un procédé associé.

Description

La présente invention concerne un décodeur de système MPEG (Groupe des Experts en Images Animées), et, de manière plus particulière, un décodeur de système MPEG pour synchroniser des données audio avec des données vidéo sans boucle à verrouillage de phase et pour restaurer les données audio et vidéo en commandant des tampons de données audio et vidéo, et un procédé de synchronisation des signaux audio et vidéo.
Le MPEG, qui est une norme internationale concernant la compression numérique de signaux vidéo et audio, constituera bientôt une norme dominante pour tout matériel et logiciel lié à de tels signaux. Les normes
MPEG peuvent être groupées grossièrement en deux catégories : normes de compression de signaux vidéo et audio et normes de transmission et de mémorisation de deux signaux comprimés numériquement groupés en une unique séquence binaire de données.
La séquence binaire de données unique doit être séparée en un signal audio et un signal vidéo et les signaux séparés sont restaurés sous la forme des signaux d'origine par leurs décodeurs respectifs. A moins que les signaux d'horloge opérationnelle des décodeurs vidéo et audio ne soient synchronisés avec précision pendant la restauration, un des signaux peut être restauré plus rapidement que l'autre, conduisant éventuellement à une différence entre les temps de restauration relatifs. De plus, à moins que les tampons des deux décodeurs ne possèdent des capacités de mémorisation identiques, un son et une image correspondante peuvent ne pas concorder, en empêchant une restauration normale.Pour empêcher que ne survienne l'un ou l'autre de ces problèmes, le MPEG prévoit que des informations relatives au temps incluant une référence d'horloge du système (SCR), un indicateur de temps de présentation (PTS), et un indicateur de temps de décodage (DTS), soient utilisées pour synchroniser les signaux audio et vidéo.
De manière générale, les décodeurs vidéo et audio sont synchronisés en utilisant une SCR, en association avec l'un ou l'autre d'un PTS ou d'un DTS. La figure 1 représente un décodeur de système MPEG adapté à la synchronisation de signaux audio et vidéo et à la commande de tampons, tel que suggéré par le MPEG. Le décodeur de système MPEG comporte un compteur de cible du système (STC) commandé par un signal d'horloge du système de 90
KHz (27 MHZ pour le MPEG2). Ce signal d'horloge est synchronisé avec le signal d'horloge d'un codeur par l'intermédiaire d'une boucle à verrouillage de phase en utilisant une valeur de SCR qui est envoyée au moins une fois pendant un intervalle de temps prédéterminé, par exemple de 0,7 seconde.Lorsqu'une unité de présentation unique (PU) est complètement restaurée, les décodeurs audio et vidéo comparent la valeur du PTS de la PU avec la valeur d'un compteur, émettent la PU restaurée si les deux valeurs sont égales, et restaurent une autre PU.
La PU d'un signal vidéo est de manière générale une trame, présentée toutes les 1/30 seconde, tandis que la PU d'un signal audio est une trame qui comporte un nombre prédéterminé d'octets. Du fait que les valeurs du
STC et du PTS du signal vidéo peuvent différer, des trames restaurées risquent d'être émises de manière répétée, ou plusieurs trames risquent d'être omises pour effectuer une restauration conforme au PTS. Une telle restauration intermittente à base du PTS serait cependant inappropriée pour le signal audio du fait que le son serait entendu de manière intermittente. Le signal audio doit par conséquent être restauré de manière continue.L'utilisation d'une boucle à verrouillage de phase pour synchroniser un signal d'horloge du système avec un signal d'horloge opérationnelle, pour le signal audio, constitue une manière de restaurer le signal audio de manière continue et con formément au temps indiqué par son PTS.
Une approche par boucle à verrouillage de phase est adaptée lorsqu'un émetteur émet des données de manière unilatérale, tel que, par exemple, dans la diffusion. Cependant, lorsqu'une commande bilatérale est possible, par exemple dans un disque compact vidéo, la synchronisation peut être réalisée de manière plus simple.
D'autre part, à moins que l'émetteur n'assure la transmission conformément à une SCR, tel que par exemple dans un réseau ATM (mode transfert asynchrone), un signal d'horloge du système peut être ajusté conformément à la quantité de données mémorisées dans un tampon, ou une boucle à verrouillage de phase peut être utilisée en association avec un circuit de commande de correction.
Un but de la présente invention consiste à fournir un dispositif pour commander des tampons audio et vidéo sans boucle à verrouillage de phase lors de la restauration de données MPEG, dans un système MPEG.
Un autre but de la présente invention consiste à fournir un dispositif pour synchroniser un signal audio avec un signal vidéo en utilisant des informations relatives au temps dans un système MPEG.
Encore un autre but de la présente invention consiste à fournir un procédé pour synchroniser facilement un signal audio avec un signal vidéo en utilisant des informations relatives au temps dans un système MPEG.
Un but supplémentaire de la présente invention consiste à fournir un décodeur de système MPEG pour synchroniser facilement un signal audio avec un signal vidéo en utilisant des informations relatives au temps, sans boucle à verrouillage de phase, dans le cas où une commande bilatérale est disponible, par exemple, dans un disque compact vidéo, et restaurer les signaux audio et vidéo de manière appropriée en commandant la quantité de données mémorisées dans les tampons audio et vidéo, dans un système MPEG.
Pour atteindre le premier but, on fournit un dispositif de commande de tampons audio et vidéo pour système MPEG, comportant : un décodeur du système destiné à recevoir une séquence binaire de données de système à partir d'un disque, séparer la séquence binaire de données de système en séquences binaires audio et vidéo et extraire les références d'horloge du système (SCR) d'une première donnée audio et vidéo entrée, un tampon audio du système destiné à mémoriser la séquence binaire audio provenant du décodeur du système et à délivrer en sortie la séquence binaire audio mémorisée conformément à un signal d'horloge de sortie audio et à un signal d'horloge de commande de sortie obtenu à partir d'une SCR audio, un tampon vidéo du système destiné à mémoriser la séquence binaire vidéo en provenance du décodeur du système et à délivrer en sortie la séquence binaire vidéo mémorisée conformément à un signal d'horloge de sortie vidéo et à un signal d'horloge de commande de sortie obtenu à partir d'une SCR vidéo, une unité de commande d'entrée de données destinée à commander la quantité de données délivrées par le disque sur le décodeur du système conformément à une quantité de données de tampon audio indiquant la quantité de données mémorisées dans le tampon audio du système, et une unité de commande d'entrée et de sortie de tampons destinée à produire des signaux d'horloge utilisés pour les opérations d'entrée et de sortie des tampons audio et vidéo du système et à mesurer la quantité de données du tampon audio.
Pour atteindre le deuxième but, on fournit un dispositif de synchronisation de signaux audio et vidéo pour système MPEG, comportant : un tampon audio du système destiné à mémoriser des données audio, un tampon vidéo du système destiné à mémoriser des données vidéo, une unité de commande d'entrée et de sortie de tampons destinée à commander l'entrée et la sortie des tampons vidéo et audio du système et à délivrer en sortie un signal de début d'interruption lorsque le tampon audio du système commence à délivrer en sortie des données audio, un STC audio destiné à recevoir le signal de début d'interruption en provenance de l'unité de commande d'entrée et de sortie de tampons et à augmenter de manière séquentielle une valeur conformément à un signal d'horloge de compression audio, un générateur d'interruption destiné à produire une interruption et à réinitialiser le STC audio si la valeur du STC audio est à une valeur prédéterminée ou au-dessus, un STC vidéo destiné à compter chaque impulsion d'horloge du STC vidéo après le début d'émission de données vidéo par le tampon vidéo du système, et une unité de traitement d'interruption destinée à incrémenter un compteur d'une valeur prédéterminée à chaque fois qu'une interruption est reçue en provenance du générateur d'interruption, à comparer la valeur décomptée avec la valeur du STC vidéo, et à délivrer en sortie un signal de commande vers un décodeur vidéo pour retarder ou accélérer une opération de décodage si la différence comparée est inférieure ou est supérieure à une valeur prédéterminée, respectivement.
Pour atteindre le troisième but, on fournit un procédé de synchronisation de signaux audio et vidéo pour un décodeur de système MPEG, comportant les étapes consistant à : (a) compter les impulsions d'horloge de décodage audio lorsque des données audio sont envoyées par un tampon audio du système vers un décodeur audio, (b) compter les impulsions de décodage vidéo lorsque des données vidéo sont envoyées par un tampon vidéo du système vers un décodeur vidéo, (c) produire une interruption si la valeur décomptée des impulsions d'horloge de décodage audio est à une valeur prédéterminée ou au-dessus, (d) in crémenter un compteur d'une valeur prédéterminée à chaque fois que l'interruption est produite et comparer la valeur avec la valeur décomptée des impulsions d'horloge de décodage vidéo pour obtenir la différence, et (e) commander la vitesse de décodage d'un décodeur vidéo pour que celle-ci soit plus lente ou plus rapide si la différence calculée est inférieure ou supérieure à une valeur prédéterminée.
Pour atteindre le quatrième but, on fournit un décodeur de système MPEG comportant : un décodeur du système destiné à recevoir une séquence binaire de données de système à partir d'un disque, séparer la séquence binaire de données de système en séquences binaires audio et vidéo, et extraire les références d'horloge du système (SCR) d'un première donnée audio et vidéo d'entrée, un tampon audio du système destiné à mémoriser la séquence binaire audio provenant du décodeur du système et à délivrer en sortie la séquence binaire audio mémorisée con formément à un signal d'horloge de sortie audio et à un signal d'horloge de commande de sortie obtenu à partir de la SCR audio, un tampon vidéo du système destiné à mémoriser la séquence binaire vidéo en provenance du décodeur du système et à délivrer en sortie la séquence binaire vidéo mémorisée conformément à un signal d'horloge de sortie vidéo et à un signal d'horloge de commande de sortie obtenu à partir de la SCR vidéo, une unité de commande d'entrée de données destinée à commander la quantité de données envoyées par le disque vers le décodeur du système conformément à une quantité de données du tampon audio indiquant la quantité de données mémorisées dans le tampon audio du système, une unité de commande d'entrée et de sortie de tampons destinée à produire des signaux d'horloge utilisés pour des opérations d'entrée et de sortie des tampons audio et vidéo du système, à mesurer la quantité de données du tampon audio, et à délivrer en sortie un signal de début d'interruption lorsque le tampon audio du système commence à délivrer en sortie des données, un STC audio destiné à recevoir le signal de début d'interruption en provenance de l'unité de commande d'entrée et de sortie du tampon et à augmenter de manière séquentielle une valeur conformément à un signal d'horloge de compression audio, un générateur d'interruption destiné à produire une interruption et à réinitialiser le
STC audio si la valeur du STC audio est à une valeur prédéterminée ou au-dessus, un décodeur audio destiné à décoder les données audio délivrées en sortie par le tampon audio du système en synchronisation avec un signal d'horloge de compression audio, un décodeur vidéo destiné à décoder les données vidéo délivrées en sortie par le tampon vidéo du système, un STC vidéo destiné à compter chaque impulsion d'horloge du STC vidéo qui est utilisée pour décoder les données vidéo en provenance du tampon vidéo du système par le décodeur vidéo après le début de la transmission des données vidéo par le tampon vidéo du système, et une unité de traitement d'interruption destinée à incrémenter un compteur d'une valeur prédéterminée à chaque fois qu'est reçue une interruption en provenance du générateur d'interruption, à comparer les valeurs décomptées avec la valeur du STC vidéo, et à envoyer un signal de commande vers le décodeur vidéo pour retarder ou accélérer une opération de décodage si la différence comparée est inférieure ou supérieure à une valeur prédéterminée, respectivement.
Les buts et les avantages de la présente invention, mentionnés ci-dessus, apparaîtront plus clairement à la lecture de la description détaillée de modes préférés de réalisation de la présente invention, faite en référence aux dessins annexés sur lesquels
- la figure 1 est un schéma fonctionnel d'un décodeur de système MPEG utilisé pour synchroniser un si gnal audio avec un signal vidéo et pour commander des tampons, tel que suggéré par le MPEG,
- la figure 2 est un schéma fonctionnel d'un dispositif de commande de tampons audio et vidéo dans un système MPEG selon la présente invention,
- la figure 3 est un schéma fonctionnel détaillé de l'unité de commande d'entrée et de sortie de tampons 230 représentée sur la figure 2,
- la figure 4 est un schéma fonctionnel d'un dispositif de synchronisation de signaux audio et vidéo dans un système MPEG selon la présente invention,
- la figure 5 est un schéma fonctionnel détaillé du STC audio et du générateur d'interruption 430 représentés sur la figure 4,
- la figure 6 est un schéma fonctionnel détaillé de l'unité de commande d'interruption 440 représentée sur la figure 4,
- la figure 7 est un ordinogramme représentant un procédé utilisé pour synchroniser un signal audio avec un signal vidéo selon la présente invention, et
- la figure 8 est un schéma fonctionnel d'un décodeur de système MPEG selon la présente invention.
En se reportant à la figure 2, un dispositif de commande de tampons audio et vidéo, dans un système MPEG, selon la présente invention comporte un décodeur du système 200, un tampon audio du système 210, un tampon vidéo du système 220, une unité de commande d'entrée et de sortie de tampons 230, et une unité de commande d'entrée de données 240.
Le décodeur du système 200 reçoit une séquence binaire de système MPEG en provenance d'un disque (non-représenté), sépare la séquence binaire reçue en une séquence binaire audio et une séquence binaire vidéo, et transmet les séquences binaires audio et vidéo séparées au tampon audio du système 210 et au tampon vidéo du sys tème 220, respectivement. Le décodeur du système 200 extrait aussi les SCR des premières séquences binaires audio et vidéo reçues après une réinitialisation du système et envoie les SCR extraits vers l'unité de commande d'entrée et de sortie de tampons 230.
Le tampon audio du système 210, qui est une mémoire du type premier entré premier sorti (FIFO), mémorise temporairement la séquence binaire audio extraite par le décodeur du système 200 et l'envoie vers un décodeur audio 250 conformément à un signal d'horloge de sortie audio prédéterminé et à un signal d'horloge de commande de sortie obtenu à partir de la SCR audio extraite par le décodeur du système 200.
Le tampon vidéo du système 220, qui est une mémoire du type premier entré premier sorti (FIFO), mémorise temporairement la séquence binaire vidéo extraite par le décodeur du système 200 et l'envoie vers un décodeur vidéo 260 conformément à un signal d'horloge de sortie vidéo prédéterminé et à un signal d'horloge de commande de sortie obtenu à partir de la SCR vidéo extraite par le décodeur du système 200.
L'unité de commande d'entrée et de sortie de tampons 230 commande le flux des données vers les tampons audio et vidéo du système 210 et 220 et à partir de ces derniers en produisant les signaux d'horloge de commande d'entrée et de sortie audio/vidéo et en envoyant ces signaux d'horloge de commande vers les tampons 210 et 220.
De manière spécifique, l'unité de commande 230 comporte un circuit de mesure de tampon audio 232, un générateur d'horloge audio 234 et un générateur d'horloge vidéo 236, comme représenté sur la figure 3.
Le circuit de mesure de tampon audio 232 calcule la différence (appelée quantité de données du tampon audio) entre le nombre de fois où des données sont entrées dans le tampon audio 210 et le nombre de fois où les données sont sorties de celui-ci, et envoie la quantité de données du tampon audio vers l'unité de commande d'entrée de données 240. Le générateur d'horloge audio 234 produit les signaux d'horloge de commande d'entrée et de sortie audio en utilisant la SCR audio, extraite par le décodeur du système 200, et envoie ces signaux d'horloge de commande vers le tampon audio du système 210. Du fait que les données audio doivent être délivrées en sortie de manière continue en conformité avec le taux de compression du signal audio, le générateur d'horloge audio 234 utilise un signal d'horloge de compression audio prédéterminé pour délivrer en sortie les données audio.
Le générateur d'horloge vidéo 236 produit les signaux d'horloge de commande d'entrée et de sortie vidéo en utilisant la SCR vidéo extraite par le décodeur du système 200, et envoie ces signaux d'horloge de commande vers le tampon vidéo du système 220. Lorsque les données vidéo remplissent le tampon vidéo du système 220 jusqu'à un niveau prédéterminé, les données vidéo sont transmises vers le décodeur vidéo 260.
L'unité de commande d'entrée de données 240 re çoit la quantité de données du tampon audio provenant de l'unité de commande d'entrée et de sortie de tampons 230 et compare la quantité affectée de valeurs limites supérieure et inférieure prédéterminées à la quantité de données du tampon audio reçues en provenance de l'unité de commande d'entrée et de sortie de tampons 230. Si la quantité de données du tampon audio est supérieure à la valeur limite supérieure, aucun signal de demande de données n'est produit : si celle-ci est inférieure à la valeur limite inférieure, un signal de demande de données est produit. Ainsi, la quantité de données audio est ajustée entre les valeurs limites supérieure et inférieure.
On va maintenant décrire le fonctionnement du dispositif de commande de tampons audio et vidéo mentionné ci-dessus dans un système MPEG, conformément au premier but de la présente invention. Dans les normes MPEG, le taux de codage d'un signal vidéo varie avec les caractéristiques de l'image. Le signal audio doit cependant être codé en utilisant un taux fixé de manière stricte.
Une séquence binaire de système MPEG en provenance d'un disque (non-représenté) est séparée en séquences binaires audio et vidéo et en SCR audio et vidéo par le décodeur du système 200. La séquence binaire audio séparée est envoyée vers le tampon audio du système 210, et la séquence binaire vidéo est envoyée vers le tampon vidéo du système 220. Par ailleurs, les SCR audio et vidéo sont envoyées vers l'unité de commande d'entrée et de sortie de tampons 230. Ici, la réception de la séquence binaire de système MPEG en provenance du disque est ajustée de telle sorte que les données audio mémorisées dans le tampon audio du système 210 soient maintenues entre les valeurs limites supérieure et inférieure prédéterminées conformément à la quantité de données du tampon audio délivrées en sortie par le circuit de mesure de quantité de données du tampon audio 232.C'est-à-dire que l'unité de commande d'entrée de données 240 reçoit la quantité de données du tampon audio en provenance de l'unité de commande d'entrée et de sortie de tampons 230, et compare la quantité avec les valeurs limites supérieure et inférieure prédéterminées. Si la quantité de données du tampon audio est supérieure à la valeur limite supérieure, aucun signal de demande de données n'est produit ; si celle-ci est inférieure à la valeur limite inférieure, un signal de demande de données est produit et est envoyé vers le disque.
Les données audio mémorisées dans le tampon audio du système 210 sont envoyées vers le décodeur audio 250 conformément à un signal d'horloge de commande de sortie provenant du générateur d'horloge audio 234 de l'unité de commande d'entrée et de sortie de tampons 230 et à un signal d'horloge de compression audio qui est envoyé depuis l'extérieur. Les données audio sont délivrées en sortie au temps calculé par l'équation suivante
temps de sortie audio = temps de sortie vidéo
+ (décalage + SCR audio - SCR vidéo), où le décalage indique une différence entre le temps de décodage des données par le décodeur audio 250 et le temps de décodage des données par le décodeur vidéo 260.
De manière générale, le codage d'un signal vidéo prend plus de temps que le codage d'un signal audio, d'où il résulte un retard dans le décodage. Pour compenser ce retard dans le décodage, une valeur de décalage est déterminée de manière empirique. C'est-à-dire que même si les
SCR audio et vidéo sont identiques, le système doit compenser la différence existant entre le temps nécessaire pour décoder les données vidéo et le temps nécessaire pour décoder les données audio, pour obtenir des sorties audio et vidéo décodées de manière simultanée. Du fait que les SCR audio et vidéo sont assignées aux premiers paquets mémorisés dans les tampons, seuls les SCR des premiers paquets sont nécessaires, et les SCR qui viennent ensuite peuvent être négligés. Lorsque les données vidéo ont rempli le tampon vidéo du système 220 à un niveau prédéterminé, les données sont envoyées vers le décodeur vidéo 260.
La figure 4 est un schéma fonctionnel d'un dispositif de synchronisation audio et vidéo dans un système
MPEG selon la présente invention. Le dispositif de synchronisation audio et vidéo comporte un tampon audio du système 400, un tampon vidéo du système 410, une unité de commande d'entrée et de sortie de tampons 420, un STC au dio et un générateur d'interruption 430, une unité de commande d'interruption 440 et un STC vidéo 450.
Le tampon audio du système 400 est une mémoire
FIFO destinée à mémoriser les données audio, tandis que le tampon vidéo du système 410 est une mémoire FIFO destinée à mémoriser les données vidéo.
L'unité de commande d'entrée et de sortie de tampons 420 reçoit les SCR audio et vidéo, et commande l'entrée et la sortie des tampons audio et vidéo du système 400 et 410, respectivement, conformément aux SCR.
Le générateur d'interruption 430 comporte un bloc STC audio 432 et un circuit logique générateur d'interruption 434 comme représenté sur la figure 5. Lorsque le bloc STC audio 432 reçoit un signal de début d'interruption en provenance de l'unité de commande d'entrée et de sortie de tampons 420, celui-ci commence à entrer un signal d'horloge de compression audio fourni par un diviseur 460 afin d'incrémenter la valeur de son compteur interne. Lorsque la valeur incrémentée atteint un niveau prédéterminé, le circuit logique générateur d'interruption 434 produit une interruption et réinitialise ensuite à zéro la valeur du compteur interne du STC audio 432.
L'unité de traitement d'interruption 440 traite l'interruption produite par le générateur d'interruption 430 et comporte un registre de comptage d'interruptions 442, un comparateur 444 et un bloc de logique de commande 446, comme représenté sur la figure 6. A chaque fois qu'une interruption est envoyée par le générateur d'interruption 430, le registre de comptage d'interruptions 442 augmente une valeur mémorisée d'une quantité prédéterminée. Le comparateur 444 extrait la valeur du STC vidéo 450 et compare la valeur lue à la valeur du registre de comptage d'interruptions 442. Lorsque le résultat comparé est au-dessus ou au-dessous d'une valeur prédéterminée, le bloc de logique de commande 446 produit un signal de commande destiné à retarder ou à accélérer une opération de décodage vidéo afin de synchroniser le signal vidéo avec le signal audio.
Le STC vidéo 450, fonctionnant avec un signal d'horloge de STC vidéo de 90 KHz ou de 27 MHz, est un compteur qui est destiné à augmenter une valeur décomptée après la sortie du tampon vidéo. Par conséquent, il peut être déterminé d'après la valeur décomptée si l'opération de décodage vidéo est trop rapide ou est trop lente.
La figure 7 est un ordinogramme représentant un procédé de synchronisation audio et vidéo dans un système
MPEG selon la présente invention. En se reportant à la figure 7, on va décrire le fonctionnement du dispositif de synchronisation audio et vidéo.
Ici, lorsque les données vidéo ont rempli le tampon vidéo du système 410 à un niveau prédéterminé, les données vidéo sont envoyées vers le décodeur vidéo 475.
Lorsque le tampon audio du système 400 commence à délivrer en sortie des données audio, un signal de début d'interruption est envoyé vers le générateur d'interruption 430. Le STC audio 432 reçoit alors un signal de compression audio en provenance du diviseur 460 et incrémente les valeurs des compteurs en fonction du taux de compression des données audio (étape 700).
Lorsque des données vidéo sont envoyées par le tampon vidéo du système 410 vers le décodeur vidéo 475, des impulsions d'horloge de décodage vidéo sont décomptées par le STC vidéo 450 conformément à un signal d'horloge produit dans un bloc d'horloge de STC vidéo 480 utilisé pour décoder les données vidéo émises (étape 710).
Lorsque la valeur décomptée du STC audio 432 atteint une valeur prédéterminée, le circuit logique générateur d'interruption 434 produit une interruption et délivre le signal vers l'unité de commande d'interruption 440 (étape 720), et, ensuite, réinitialise à zéro la va leur du STC audio 432. Par exemple, si la fréquence de l'horloge de compression audio est de 384 KHz et si une interruption est produite à chaque seconde, une interruption est produite lorsque la valeur du STC audio est égale à 384 000. Ceci est effectué pour synchroniser le signal vidéo avec le signal audio en indiquant pour un signal audio un temps de décodage de une seconde.
L'unité de traitement d'interruption 440 comporte un compteur qui est incrémenté d'une valeur prédéterminée à chaque fois qu'une interruption est reçue (étape 730), mémorise la valeur décomptée dans le registre de comptage d'interruptions 442, et utilise un comparateur 444 pour comparer la valeur décomptée à une valeur mémorisée dans le STC vidéo 450 (étape 740). Ici, la valeur mémorisée dans le STC vidéo 450 est le nombre d'impulsions d'horloge décompté en utilisant l'horloge de 90 KHz ou de 27 MHz produite par le bloc d'horloge de STC vidéo 480.
Si la différence indiquée par le comparateur 444 est supérieure ou inférieure à une valeur prédéterminée, le bloc de logique de commande 446 produit un signal de commande destiné à accélérer ou à retarder, respectivement, l'opération de décodage vidéo afin de synchroniser le signal vidéo avec le signal audio (étape 750).
Par exemple, si une interruption est produite à chaque seconde, la valeur du registre de comptage d'interruptions 442 est augmentée de 90 000 pour un signal d'horloge de STC vidéo de 90 KHz ou est augmentée de 27 000 000 pour un signal d'horloge de STC vidéo de 27 MHz à chaque fois qu'une interruption est reçue. La valeur du registre de comptage d'interruptions 442, qui est de une seconde du point de vue du décodage vidéo, sert de valeur de référence pour synchroniser la valeur du registre de comptage d'interruptions 442 avec le signal audio. La valeur du STC vidéo est extraite et compa rée à la valeur du registre de comptage d'interruptions 442.Si la valeur du STC vidéo est supérieure à la valeur du registre de comptage d'interruptions 442 d'une valeur supérieure à une valeur correspondant à une trame vidéo (1/30 seconde, c'est-à-dire 3000 dans le cas d'une horloge de STC de 90 KHz et 900 000 dans le cas d'une horloge STC de 27 MHz), ce qui implique que le codage du signal vidéo est plus rapide que le codage du signal audio, un signal de pause est produit pour que le codage du signal vidéo soit arrêté pendant une trame vidéo. Si la différence est inférieure de la valeur correspondant à une trame par rapport à la valeur du registre de comptage d'interruptions 442, ce qui implique que le codage du signal vidéo est plus lent que le codage du signal audio, un signal d'avancée est produit pour que le codage de la trame suivante soit sauté et que le codage de la trame venant après la trame suivante soit effectué.La valeur du comptage d'interruptions est alors ajustée par addition ou soustraction de la valeur d'une trame vidéo. Si la différence est située dans une plage de valeurs prédéterminée, la valeur du registre de comptage d'interruptions 442 est augmentée de manière simple, et l'interruption suivante est attendue. Ainsi, le temps nécessaire au
STC vidéo est harmonisé avec celui nécessaire au STC audio, d'où il résulte une synchronisation des signaux vidéo et audio.
La figure 8 est un schéma fonctionnel d'un décodeur de système MPEG selon la présente invention. Le décodeur de système MPEG comporte un décodeur du système 805, un tampon audio du système 810, un tampon vidéo du système 815, une unité de commande d'entrée de données 825, un STC audio et un générateur d'interruption 830, une unité de traitement d'interruption 835, un STC vidéo 840, un décodeur audio 845, un décodeur vidéo 850, une unité de commande d'entrée et de sortie de tampons 820, un diviseur 855, une horloge audio 860 et une horloge de
STC vidéo 865.
Le décodeur du système MPEG, mentionné cidessus, a une configuration dans laquelle sont incorporés le dispositif de commande de tampon satisfaisant au premier but de la présente invention et le dispositif de synchronisation audio et vidéo satisfaisant au deuxième but de la présente invention. Ainsi, le décodeur du système MPEG reçoit une séquence binaire de données de système MPEG en provenance d'un disque, commande les tampons afin de mémoriser les données audio et vidéo d'un système
MPEG, synchronise un signal audio avec un signal vidéo, et décode les signaux audio et vidéo en utilisant des décodeurs audio et vidéo.
Le décodeur du système 805, le tampon audio du système 810, le tampon vidéo du système 815, l'unité de commande d'entrée de données 825, le STC audio et le générateur d'interruption 830, et l'unité de traitement d'interruption 835 agissent de la même manière que ceux du dispositif de commande de tampon d'un système MPEG satisfaisant au premier but de la présente invention et du dispositif de synchronisation audio et vidéo satisfaisant au deuxième but de la présente invention.
Le décodeur vidéo 850 effectue un décodage conformément aux impulsions d'horloge du STC vidéo 840. Par conséquent, il peut être déterminé d'après une valeur du
STC vidéo si le codage vidéo est trop rapide ou est trop lent.
Le décodeur audio 845 décode les séquences de données audio successives conformément à un signal d'horloge de compression audio. Le décodeur vidéo 850 informe l'unité de commande d'entrée et de sortie de tampons 820 de l'état de son tampon interne, tout en décodant les données vidéo, en commandant par conséquent l'entrée des données. En outre, le décodeur vidéo 850 reçoit un signal de commande de décodage en provenance de l'unité de traitement d'interruption 835 et retarde ou avance une trame, en commandant par conséquent la vitesse de décodage.
Ainsi, le décodeur du système MPEG mentionné ci-dessus commande les tampons et synchronise un signal vidéo avec un signal audio par l'intermédiaire du dispositif de commande de tampon et du dispositif de synchronisation de signaux audio et vidéo.
Après la synchronisation du signal audio avec le signal vidéo, les données vidéo transmises vers le décodeur vidéo 850 sont décodées en utilisant un signal d'horloge de fréquence 90 KHz ou 27 MHz, produit dans le bloc d'horloge de STC vidéo 865. Ici, un signal de commande de décodage est délivré en sortie par l'unité de traitement d'interruption 835 et une trame est retardée ou est avancée pour commander ainsi la vitesse de décodage. Les données audio superposées au signal d'horloge de compression audio et transmises de manière successive vers le décodeur audio 845 sont décodées conformément à un signal d'horloge audio produit dans le générateur d'horloge audio 860.
Comme décrit ci-dessus, selon la présente invention, un décodage fiable peut être effectué sans dispositif tel qu'une boucle à verrouillage de phase, en utilisant des signaux d'horloge opérationnels séparés pour les décodeurs audio et vidéo, tout en satisfaisant au concept de base d'un signal d'horloge de système MPEG.

Claims (6)

REVENDICATIONS
1. Dispositif de commande de tampons audio et vidéo pour système MPEG, caractérisé en ce qu'il comporte
un décodeur du système (200) destiné à recevoir une séquence binaire de données de système à partir d'un disque, séparer la séquence binaire de données de système en séquences binaires audio et vidéo et extraire les références d'horloge du système (SCR) d'une première donnée audio et vidéo entrée,
un tampon audio du système (210) destiné à mémoriser la séquence binaire audio provenant du décodeur du système et à délivrer en sortie la séquence binaire audio mémorisée conformément à un signal d'horloge de sortie audio et à un signal d'horloge de commande de sortie obtenu à partir d'une SCR audio,
un tampon vidéo du système (220) destiné à mémoriser la séquence binaire vidéo en provenance du décodeur du système et à délivrer en sortie la séquence binaire vidéo mémorisée conformément à un signal d'horloge de sortie vidéo et à un signal d'horloge de commande de sortie obtenu à partir d'une SCR vidéo,
une unité de commande d'entrée de données (240) destinée à commander la quantité de données délivrées par le disque sur le décodeur du système conformément à une quantité de données de tampon audio indiquant la quantité de données mémorisées dans le tampon audio du système, et
une unité de commande d'entrée et de sortie de tampons (230) destinée à produire des signaux d'horloge utilisés pour les opérations d'entrée et de sortie des tampons audio et vidéo du système et à mesurer la quantité de données du tampon audio.
2. Dispositif de commande de tampons audio et vidéo pour système MPEG selon la revendication 1, caractérisé en ce que ladite unité de commande d'entrée de données comporte un comparateur à limites supérieure et inférieure pour comparer ladite quantité de données du tampon audio aux valeurs limites supérieure et inférieure, respectivement, cesse de produire une demande de données si la quantité de données du tampon audio est supérieure à la valeur limite supérieure, et produit un signal de demande de données si la quantité de données du tampon audio est inférieure à la valeur limite inférieure.
3. Dispositif de synchronisation de signaux audio et vidéo pour système MPEG, caractérisé en ce qu'il comporte
un tampon audio du système (400) destiné à mémoriser des données audio,
un tampon vidéo du système (410) destiné à mémoriser des données vidéo,
une unité de commande d'entrée et de sortie de tampons (420) destinée à commander l'entrée et la sortie des tampons vidéo et audio du système et à délivrer en sortie un signal de début d'interruption lorsque le tampon audio du système commence à délivrer en sortie des données audio,
un STC audio (432) destiné à recevoir le signal de début d'interruption en provenance de l'unité de commande d'entrée et de sortie de tampons et à augmenter de manière séquentielle une valeur conformément à un signal d'horloge de compression audio,
un générateur d'interruption (430) destiné à produire une interruption et à réinitialiser le STC audio si la valeur du STC audio est à une valeur prédéterminée ou au-dessus,
un STC vidéo (450) destiné à compter chaque impulsion d'horloge du STC vidéo après le début d'émission des données vidéo par le tampon vidéo du système, et
une unité de traitement d'interruption (440) destinée à incrémenter un compteur d'une valeur prédéterminée à chaque fois qu'une interruption est reçue en provenance du générateur d'interruption, à comparer la valeur décomptée avec la valeur du STC vidéo, et à délivrer en sortie un signal de commande vers un décodeur vidéo pour retarder ou accélérer une opération de décodage si la différence comparée est inférieure ou est supérieure à une valeur prédéterminée, respectivement.
4. Dispositif de synchronisation de signaux audio et vidéo pour système MPEG selon la revendication 3, caractérisé en ce que ladite unité de traitement d'interruption (440) comporte
un registre (442) destiné à mémoriser une interruption reçue en provenance dudit générateur d'interruption,
un comparateur (444) destiné à comparer une valeur mémorisée dans ledit registre à la valeur du STC vidéo, et
une unité de commande (446) destinée à délivrer en sortie un signal de commande pour retarder ou accélérer une opération de décodage si la valeur comparée dudit comparateur est supérieure ou inférieure à une valeur prédéterminée, respectivement.
5. Procédé de synchronisation de signaux audio et vidéo pour un décodeur de système MPEG, caractérisé en ce qu'il comporte les étapes consistant à
(a) compter les impulsions d'horloge de décodage audio lorsque des données audio sont envoyées par un tampon audio du système vers un décodeur audio,
(b) compter les impulsions de décodage vidéo lorsque des données vidéo sont envoyées par un tampon vidéo du système vers un décodeur vidéo,
(c) produire une interruption si la valeur décomptée des impulsions d'horloge de décodage audio est à une valeur prédéterminée ou au-dessus,
(d) incrémenter un compteur d'une valeur prédéterminée à chaque fois que l'interruption est produite et comparer la valeur avec la valeur décomptée des impulsions d'horloge de décodage vidéo pour obtenir la différence, et
(e) commander la vitesse de décodage d'un décodeur vidéo pour que celle-ci soit plus lente ou plus rapide si la différence calculée est inférieure ou supérieure à une valeur prédéterminée.
6. Décodeur de système MPEG caractérisé en ce qu'il comporte
un décodeur du système (805)destiné à recevoir une séquence binaire de données de système à partir d'un disque, séparer la séquence binaire de données de système en séquences binaires audio et vidéo, et extraire les références d'horloge du système (SCR) d'un première donnée audio et vidéo d'entrée,
un tampon audio du système (810) destiné à mémoriser la séquence binaire audio provenant du décodeur du système et à délivrer en sortie la séquence binaire audio mémorisée conformément à un signal d'horloge de sortie audio et à un signal d'horloge de commande de sortie obtenu à partir de la SCR audio,
un tampon vidéo du système (815) destiné à mémoriser la séquence binaire vidéo en provenance du décodeur du système et à délivrer en sortie la séquence binaire vidéo mémorisée conformément à un signal d'horloge de sortie vidéo et à un signal d'horloge de commande de sortie obtenu à partir de la SCR vidéo,
une unité de commande d'entrée de données (825) destinée à commander la quantité de données envoyées par le disque vers le décodeur du système conformément à une quantité de données du tampon audio indiquant la quantité de données mémorisées dans le tampon audio du système,
une unité de commande d'entrée et de sortie de tampons (820) destinée à produire des signaux d'horloge utilisés pour des opérations d'entrée et de sortie des tampons audio et vidéo du système, à mesurer la quantité de données du tampon audio, et à délivrer en sortie un signal de début d'interruption lorsque le tampon audio du système commence à délivrer en sortie des données,
un STC audio destiné à recevoir le signal de début d'interruption en provenance de l'unité de commande d'entrée et de sortie du tampon et à augmenter de manière séquentielle une valeur conformément à un signal d'horloge de compression audio,
un générateur d'interruption (830) destiné à produire une interruption et à réinitialiser le STC audio si la valeur du STC audio est à une valeur prédéterminée ou au-dessus,
un décodeur audio (845) destiné à décoder les données audio délivrées en sortie par le tampon audio du système en synchronisation avec un signal d'horloge de compression audio, un décodeur vidéo destiné à décoder les données vidéo délivrées en sortie par le tampon vidéo du système,
un STC vidéo (840) destiné à compter chaque impulsion d'horloge du STC vidéo qui est utilisée pour décoder les données vidéo en provenance du tampon vidéo du système par le décodeur vidéo après le début de la transmission des données vidéo par le tampon vidéo du système, et
une unité de traitement d'interruption (835) destinée à incrémenter un compteur d'une valeur prédéterminée à chaque fois qu'est reçue une interruption en provenance du générateur d'interruption, à comparer les valeurs décomptées avec la valeur du STC vidéo, et à en voyer un signal de commande vers le décodeur vidéo pour retarder ou accélérer une opération de décodage si la différence comparée est inférieure ou supérieure à une valeur prédéterminée, respectivement.
FR9615100A 1995-12-09 1996-12-09 Synchronisation de signaux audio et video de systeme mpeg, decodeur, et procede associe Expired - Fee Related FR2742288B1 (fr)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR19950048066 1995-12-09
KR1019960034299A KR100207687B1 (ko) 1995-12-09 1996-08-19 앰펙(mpeg) 시스템 복호기 및 오디오/비디오 동기 방법

Publications (2)

Publication Number Publication Date
FR2742288A1 true FR2742288A1 (fr) 1997-06-13
FR2742288B1 FR2742288B1 (fr) 2004-07-30

Family

ID=26631470

Family Applications (1)

Application Number Title Priority Date Filing Date
FR9615100A Expired - Fee Related FR2742288B1 (fr) 1995-12-09 1996-12-09 Synchronisation de signaux audio et video de systeme mpeg, decodeur, et procede associe

Country Status (3)

Country Link
JP (1) JPH09219859A (fr)
KR (1) KR100207687B1 (fr)
FR (1) FR2742288B1 (fr)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1193981A2 (fr) * 1997-09-05 2002-04-03 Matsushita Electric Industrial Co., Ltd. Procédé de décodage et support d'enregistrement où est enregistré un programme de décodage
EP1554868A2 (fr) * 2002-10-24 2005-07-20 Thomson Licensing S.A. Procede et systeme pour le maintien de la synchronisation labiale

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3422686B2 (ja) 1998-06-12 2003-06-30 三菱電機株式会社 データ復号装置及びデータ復号方法
KR20050022556A (ko) * 2003-08-20 2005-03-08 삼성전자주식회사 고신뢰 복호화 장치 및 방법
KR100619034B1 (ko) 2004-06-19 2006-08-31 삼성전자주식회사 디지털 멀티미디어 데이터 수신기에서 송수신 데이터 동기방법 및 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5045940A (en) * 1989-12-22 1991-09-03 Avid Technology, Inc. Video/audio transmission systsem and method
US5365552A (en) * 1992-11-16 1994-11-15 Intel Corporation Buffer fullness indicator
US5404171A (en) * 1992-06-19 1995-04-04 Intel Corporation Method and apparatus for synchronizing digital packets of information to an arbitrary rate

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5045940A (en) * 1989-12-22 1991-09-03 Avid Technology, Inc. Video/audio transmission systsem and method
US5404171A (en) * 1992-06-19 1995-04-04 Intel Corporation Method and apparatus for synchronizing digital packets of information to an arbitrary rate
US5365552A (en) * 1992-11-16 1994-11-15 Intel Corporation Buffer fullness indicator

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1193981A2 (fr) * 1997-09-05 2002-04-03 Matsushita Electric Industrial Co., Ltd. Procédé de décodage et support d'enregistrement où est enregistré un programme de décodage
EP1193981A3 (fr) * 1997-09-05 2002-05-15 Matsushita Electric Industrial Co., Ltd. Procédé de décodage et support d'enregistrement où est enregistré un programme de décodage
EP1554868A2 (fr) * 2002-10-24 2005-07-20 Thomson Licensing S.A. Procede et systeme pour le maintien de la synchronisation labiale
EP1554868A4 (fr) * 2002-10-24 2011-06-01 Thomson Licensing Procede et systeme pour le maintien de la synchronisation labiale

Also Published As

Publication number Publication date
KR100207687B1 (ko) 1999-07-15
FR2742288B1 (fr) 2004-07-30
JPH09219859A (ja) 1997-08-19

Similar Documents

Publication Publication Date Title
RU2142210C1 (ru) Устройство для получения синхронизированных воспроизведенных сигналов звука и изображения
JP4492972B2 (ja) ビデオ・エンコーダおよびエンコーダからデコーダへのタイミングを同期させる方法
JP3657017B2 (ja) 圧縮されたビデオ信号を発生する装置並びに伝達する方法
US6005872A (en) Method and device for synchronizing digital decoder and encoder clocks
EP0459911A1 (fr) Procédé pour réduire la composante basse-fréquence de la gigue dans un système de transmission de données numériques
FR2742288A1 (fr) Synchronisation de signaux audio et video de systeme mpeg, decodeur, et procede associe
FR2658969A1 (fr) Systeme constitue en reseau tel qu'un systeme radiotelephonique cellulaire, permettant de mesurer le retard de transmission entre nóoeuds du reseau et de les synchroniser entre eux.
FR2737633A1 (fr) Generateur de signaux d'horloge pour la synchronisation d'un systeme de traitement de paquets de donnees numeriques
EP0099611A1 (fr) Procédé pour engendrer un signal pour la commande de la déviation de trame dans un dispositif de reproduction d'images
KR100188946B1 (ko) 엠펙 복호기의 오디오/비디오 복호지연 보상 장치 및방법
FR2737368A1 (fr) Procede et dispositif de synchronisation d'horloge d'encodeurs et decodeurs numeriques

Legal Events

Date Code Title Description
ST Notification of lapse

Effective date: 20150831