WO2007042719A1 - Measuring the quality of perception by a user of a multimedia signal transmitted over a packet data transmission network - Google Patents

Measuring the quality of perception by a user of a multimedia signal transmitted over a packet data transmission network Download PDF

Info

Publication number
WO2007042719A1
WO2007042719A1 PCT/FR2006/051000 FR2006051000W WO2007042719A1 WO 2007042719 A1 WO2007042719 A1 WO 2007042719A1 FR 2006051000 W FR2006051000 W FR 2006051000W WO 2007042719 A1 WO2007042719 A1 WO 2007042719A1
Authority
WO
WIPO (PCT)
Prior art keywords
signal
receiver
coded
decoding
application
Prior art date
Application number
PCT/FR2006/051000
Other languages
French (fr)
Inventor
Frédéric BARD
Original Assignee
Bard Frederic
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bard Frederic filed Critical Bard Frederic
Publication of WO2007042719A1 publication Critical patent/WO2007042719A1/en

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00—Diagnosis, testing or measuring for television systems or their details
    • H04N17/004—Diagnosis, testing or measuring for television systems or their details for digital television systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B17/00—Monitoring; Testing
    • H04B17/20—Monitoring; Testing of receivers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/20—Arrangements for detecting or preventing errors in the information received using signal quality detector

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)

Abstract

The invention relates to a method for measuring the quality of perception by a user of a final multimedia signal (S'MULT) furnished by a receiver (12), said final multimedia signal being obtained by decoding a first coded signal (S'COD) received by the receiver from a packet data transmission network (14), the first coded signal corresponding to a second coded signal (SCOD) provided to the network by a transmitter (10) and obtained by coding an initial multimedia signal (SMULT). The method consists of causing the receiver to provide a first tracking signal (S'T) representative of the sequence of decoding, of a simulation of the decoding applied to the first coded signal, of the coding or of a simulation of the coding applied to the final multimedia signal, to cause the transmitter to provide a second tracking signal (ST), and to compare the first and second tracking signals.

Description

MESURE DE LA QUALITE DE PERCEPTION PAR UN UTILISATEUR D'UN SIGNAL MULTIMEDIA TRANSMIS SUR UN RESEAU DE TRANSMISSION DE MEASURING THE QUALITY OF PERCEPTION BY A USER OF A MULTIMEDIA SIGNAL TRANSMITTED ON A TRANSMISSION NETWORK OF
DONNEES PAR PAQUETSPACKET DATA
Domaine de l' inventionField of the invention
La présente invention concerne un procédé et un dispo¬ sitif de mesure de la qualité de perception par un utilisateur d'un signal multimédia transmis sur un réseau de transmission de données par paquets.The present invention relates to a method and a wholesaler ¬ operative part for measuring the quality of perception by a user of a multimedia signal transmitted over a packet data transmission network.
Dans la suite de la description, on appelle réseau un ensemble d'ordinateurs (y compris les périphériques qui y sont connectés) reliés ensemble par des canaux électroniques de communication. Il permet la transmission de données entre les différents ordinateurs, ou noeuds, qui y sont reliés. Les canaux électroniques peuvent correspondre à des liaisons sans fils, à des câbles électriques, à des fibres de verre, etc. Les dimensions d'un réseau peuvent aller de quelques ordinateurs pour un réseau local à plusieurs millions d'ordinateurs pour le réseau Internet.In the following description, a network is called a set of computers (including peripherals connected thereto) connected together by electronic communication channels. It allows the transmission of data between the different computers, or nodes, which are connected to it. Electronic channels can be wireless links, electrical cables, fiberglass, etc. The dimensions of a network can range from a few computers for a LAN to several million computers for the Internet.
La transmission d'un message sur la plupart des réseaux met en oeuvre des procédés de transmission de données par paquets qui consistent à découper le message en paquets, chaque paquet étant transmis séparément sur le réseau, les paquets étant assemblés à l'arrivée pour obtenir à nouveau le message initial. Des exemples de protocoles de transmission de données par paquets sont les suivants : le protocole TCP/IP (acronyme anglais pour Transfert Control Protocol / Internet Protocol) , utilisé notamment pour la transmission de données sur le réseau Internet, le protocole de mode de transfert asynchrone (protocole ATM, acronyme anglais pour Asynchronous Transfer Mode) et le protocole d'accès multiple avec écoute de porteuse et détection de collision (protocole CSMA/CD, acronyme anglais pour Carrier Sensé Multiple Access with Collision Detect) utilisé notamment pour la transmission de données sur un réseau Ethernet ou un réseau sans fils.The transmission of a message on most networks implements packet data transmission methods which consist in splitting the message into packets, each packet being transmitted separately over the network, the packets being assembled on arrival to obtain again the initial message. Examples of protocols for transmitting Packet data are: TCP / IP (Transfer Control Protocol / Internet Protocol), used in particular for the transmission of data over the Internet, the asynchronous transfer mode protocol (ATM protocol, acronym for Asynchronous Transfer Mode) and multiple access protocol with carrier monitoring and collision detection (CSMA / CD protocol), used in particular for the transmission of data over an Ethernet network or a network. without son.
Par ailleurs, dans la suite de la description, on appelle signal multimédia un signal représentatif d'une infor¬ mation sonore, d'une information visuelle ou d'une information à la fois sonore et visuelle. Il s'agit par exemple d'un signal vocal, musical ou vidéo. Le terme signal vidéo concerne égale¬ ment les images animées à deux ou trois dimensions mises en oeuvre, par exemple, dans les jeux vidéo ou pour l'obtention d'environnement graphique de simulation, notamment pour des applications médicales, militaires, etc. Exposé de l'art antérieurFurthermore, in the following description, multimedia signal called a signal representative of infor ¬ mation sound, visual information or information that is both audible and visual. This is for example a voice, musical or video signal. The term video signal regarding equal ¬ moving images in two or three dimensions implemented, for example, in video games or the simulation graphical environment obtain, particularly for medical, military, etc. Presentation of the prior art
Un besoin actuel correspond à la mesure de la qualité de la perception par un utilisateur d'un signal multimédia transmis sur un réseau de transmission de données par paquets entre deux noeuds du réseau appelés émetteur et récepteur. En effet, la complexité des réseaux actuels fait que certains paquets peuvent être mal transmis sur le réseau de sorte que le signal multimédia perçu par l'utilisateur ne correspond pas au signal multimédia émis à l'origine. Une mauvaise transmission est principalement due à des retards de transmissions de paquets et à des pertes de paquets. La qualité de la transmission est généralement mesurée par plusieurs paramètres, notamment les paramètres suivants dits de Qualité de Service, ou QoS (acronyme anglais pour Quality of Services) : la bande passante du réseau ; la latence du réseau qui correspond à la durée minimale de transmission d'un paquet sur un réseau et la gigue du réseau qui correspond à la variation de la latence ; et le taux de pertes par paquets .A present need is a measure of the quality of a user's perception of a multimedia signal transmitted over a packet data network between two nodes of the network called the sender and the receiver. Indeed, the complexity of the current networks that some packets may be poorly transmitted on the network so that the multimedia signal perceived by the user does not match the multimedia signal originally issued. Poor transmission is mainly due to delays in packet transmissions and packet loss. The quality of the transmission is generally measured by several parameters, notably the following so-called Quality of Service parameters, or QoS (Quality of Services acronym): the bandwidth of the network; the latency of the network which corresponds to the minimum duration of transmission of a packet over a network and the jitter of the network which corresponds to the variation of the latency; and the packet loss rate.
En outre, pour de nombreuses applications, le signal multimédia est directement fourni à l'utilisateur au fur et à mesure qu'il est reçu par le récepteur. Il s'agit, par exemple, d'une application de téléphonie sur Internet pour laquelle des utilisateurs échangent des signaux vocaux en continu par l'intermédiaire du réseau Internet. Un autre exemple correspond aux radios et aux chaînes de télévision sur Internet qui four¬ nissent respectivement en continu des signaux musicaux et vidéo par l'intermédiaire du réseau Internet. L'utilisateur est alors très sensible à d'éventuelles interruptions ou retards dans la fourniture du signal multimédia et il est important, pour les fournisseurs de tels services, de pouvoir apprécier la qualité de la perception des signaux multimédia par les utilisateurs. La qualité perçue est généralement notée sur une échelle statis¬ tique, par exemple selon l'échelle de note moyenne d'opinion ou Mean Opinion Score (MOS) qui correspond à une échelle continue de 1 à 5.In addition, for many applications, the multimedia signal is directly provided to the user as it is received by the receiver. This is, for example, an Internet telephony application for which users exchange voice signals continuously over the Internet. Another example corresponds to radio and Internet TV channels oven ¬ ne respectively continuous music and video signals via the Internet. The user is then very sensitive to any interruptions or delays in the supply of the multimedia signal and it is important for the providers of such services to be able to appreciate the quality of the perception of the multimedia signals by the users. Perceived quality is generally rated on a scale statis ¬ tick, such as the average rating of scale of opinion or Mean Opinion Score (MOS), which corresponds to a continuous scale of 1 to 5.
Des premiers procédés classiques de mesure de la qualité de perception par un utilisateur d'un signal multimédia transmis sur un réseau mettent en oeuvre des opérateurs humains qui notent la qualité de signaux de référence transmis sur le réseau. De tels procédés sont dits subjectifs. L'inconvénient principal de ces procédés est qu'ils ne peuvent pas être mis en oeuvre de façon automatique et continue et ne peuvent donc pas rendre compte de perturbations localisées ou temporaires de la qualité de transmission de signaux multimédia.The first conventional methods of measuring the quality of perception by a user of a multimedia signal transmitted over a network implement human operators who note the quality of reference signals transmitted over the network. Such methods are said to be subjective. The main disadvantage of these methods is that they can not be implemented automatically and continuously and therefore can not account for localized or temporary disturbances in the quality of multimedia signal transmission.
Des seconds procédés classiques de mesure de la qualité de perception d'un signal multimédia, dits procédés objectifs, ne mettent pas en oeuvre d'opérateurs humains et sont généralement basés sur des algorithmes de simulation de la perception des utilisateurs. Un procédé de mesure objectif est considéré comme étant intrusif si la transmission normale de signaux multimédia au récepteur doit être interrompue lors d'une opération de mesure. Un procédé intrusif consiste par exemple à envoyer une séquence de signaux de référence et à comparer les signaux de référence après et avant transmission sur le réseau pour en déduire une note globale de satisfaction. Pour des signaux de parole, un exemple de procédé objectif et intrusif d'apprécia¬ tion de la qualité de perception est le procédé PSQM (acronyme anglais pour Perceptual Speech Quality Measure) décrit par les recommandations de l'Union Internationale des Télécommunications P.861.Conventional second methods for measuring the quality of perception of a multimedia signal, called objective methods, do not use human operators and are generally based on algorithms for simulating user perception. An objective measurement method is considered intrusive if the normal transmission of multimedia signals to the receiver must be interrupted during a measurement operation. An intrusive method is for example to send a sequence of reference signals and to compare the reference signals after and before transmission on the network to deduce an overall score of satisfaction. For speech signals, an example of objective and process of intrusive appreciated ¬ quality perception is the process PSQM (English acronym for Perceptual Speech Quality Measure) described by the recommendations of the International Union of Telecommunications P.861 .
Un procédé objectif est considéré comme étant non intrusif si une opération de mesure peut être réalisée sans interrompre la transmission normale des signaux multimédia sur le réseau. Un tel procédé est, par exemple, basé sur une analyse directe du signal multimédia au niveau du récepteur. Des exemples de procédés objectifs non intrusifs sont décrits dans les documents US2002/0090134 au nom de Philips et US6741569 au nom de Telchemy. Résumé de l' inventionAn objective method is considered non-intrusive if a measurement operation can be performed without interrupting the normal transmission of the multimedia signals on the network. Such a method is, for example, based on a direct analysis of the multimedia signal at the receiver. Examples of non-intrusive objective processes are described in US2002 / 0090134 in the name of Philips and US6741569 in the name of Telchemy. Summary of the invention
La présente invention prévoit une alternative de dispositif et de procédé de mesure objectif et non intrusif de la qualité de perception d'un signal multimédia transmis sur un réseau de transmission de données par paquets.The present invention provides an alternative device and method for objective and non-intrusive measurement of the perceived quality of a multimedia signal transmitted over a packet data network.
Selon un autre aspect, la présente invention ne modifie pas ou peu le fonctionnement du réseau au niveau duquel la mesure est réalisée.According to another aspect, the present invention does not modify or slightly the operation of the network at which the measurement is made.
Selon un autre aspect, la présente invention s'applique à n'importe quel type de signal multimédia et n'importe quel type de réseau de transmission de données par paquets.In another aspect, the present invention applies to any type of multimedia signal and any type of packet data network.
Dans ce but, elle prévoit un procédé de mesure de la qualité de perception par un utilisateur d'un signal multimédia fourni par un récepteur, ledit signal multimédia étant obtenu par un décodage d'un premier signal codé reçu par le récepteur depuis un réseau de transmission de données par paquets, le premier signal codé correspondant à un second signal codé fourni au réseau par un émetteur et obtenu par codage d'un signal multimédia initial. Le procédé comprend les étapes consistant à amener le récepteur à fournir un premier signal de suivi représentatif du déroulement du décodage ou une simulation du décodage appliqué au premier signal codé ; à amener l'émetteur à appliquer le décodage ou la simulation du décodage au second signal codé et à fournir un second signal de suivi représentatif du déroulement du décodage ou de la simulation du décodage appliqué au second signal codé ; et à comparer les premier et second signaux de suivi pour fournir la mesure de la qualité de perception.For this purpose, it provides a method for measuring the quality of perception by a user of a multimedia signal provided by a receiver, said multimedia signal being obtained by a decoding of a first coded signal received by the receiver. from a packet data network, the first coded signal corresponding to a second coded signal supplied to the network by a transmitter and obtained by coding an initial multimedia signal. The method comprises the steps of causing the receiver to provide a first tracking signal representative of the decoding flow or a simulation of the decoding applied to the first coded signal; causing the transmitter to apply the decoding or the decoding simulation to the second coded signal and to provide a second tracking signal representative of the decoding flow or the simulation of the decoding applied to the second coded signal; and comparing the first and second tracking signals to provide the measure of perception quality.
Selon un exemple de réalisation de l'invention, le décodage consiste en l'application de fonctions élémentaires, le premier signal de suivi étant représentatif des instants de début d'application des fonctions élémentaires au premier signal codé et le second signal de suivi étant représentatif des instants de début d'application des fonctions élémentaires au second signal codé.According to an exemplary embodiment of the invention, the decoding consists in the application of elementary functions, the first tracking signal being representative of the instants of the beginning of application of the elementary functions to the first coded signal and the second monitoring signal being representative. instants of beginning of application of the elementary functions to the second coded signal.
Selon un exemple de réalisation de l'invention, la fourniture du second signal de suivi comprend les étapes suivantes :According to an exemplary embodiment of the invention, the provision of the second tracking signal comprises the following steps:
(a) mémoriser au niveau de l'émetteur des durées d'application des fonctions élémentaires ;(a) memorize at the transmitter the duration of application of the elementary functions;
(b) déterminer l'ordre d'application des fonctions élémentaires au second signal codé ; et(b) determining the order of application of the elementary functions to the second coded signal; and
(c) déterminer des signaux de temporisation représentatifs des instants de début d'application des fonctions élémentaires au second signal codé à partir de l ' ordre d'application des fonctions élémentaires et des durées mémorisées.(c) determining timing signals representative of the start times of application of the elementary functions to the second coded signal from the order of application of the elementary functions and the stored durations.
Selon un exemple de réalisation de l'invention, l'étape (c) est suivie d'une étape consistant à appliquer un traitement aux signaux de temporisation pour fournir le second signal de suivi ayant une taille réduite.According to an exemplary embodiment of the invention, step (c) is followed by a step of applying a processing the timing signals to provide the second tracking signal having a reduced size.
Selon un exemple de réalisation de l'invention, la fourniture du premier signal de suivi comprend les étapes suivantes :According to an exemplary embodiment of the invention, the provision of the first tracking signal comprises the following steps:
(a) mémoriser au niveau du récepteur des durées d'application des fonctions élémentaires ;(a) storing at the receiver the duration of application of the elementary functions;
(b) déterminer l'ordre d'application des fonctions élémentaires au premier signal codé ; et(b) determining the order of application of the elementary functions to the first coded signal; and
(c) déterminer des signaux de temporisation représentatifs des instants de début d'application des fonctions élémentaires au premier signal codé à partir de l ' ordre d'application des fonctions élémentaires et de durées parmi les durées mémorisées.(c) determining timing signals representative of the start times of application of the elementary functions to the first coded signal from the order of application of the elementary functions and durations among the stored durations.
Selon un exemple de réalisation de l'invention, le second signal de suivi est transmis au récepteur par l'intermédiaire du réseau parallèlement au second signal codé.According to an exemplary embodiment of the invention, the second tracking signal is transmitted to the receiver via the network parallel to the second coded signal.
La présente invention prévoit également un dispositif non intrusif de mesure de la qualité de perception par un utilisateur d'un signal multimédia fourni par un récepteur, ledit signal multimédia étant obtenu par un décodage d'un premier signal codé reçu par le récepteur depuis un réseau de transmission de données par paquets, le premier signal codé correspondant à un second signal codé fourni au réseau par un émetteur et obtenu par codage d'un signal multimédia initial, le dispositif comprend un moyen disposé au niveau du récepteur et adapté à fournir un premier signal de suivi représentatif du déroulement du décodage ou d'une simulation du décodage appliqué au premier signal codé ; un moyen disposé au niveau de l'émetteur et adapté à appliquer le décodage ou la simulation du décodage au second signal codé et à fournir un second signal de suivi représentatif du déroulement du codage ou de la simulation du décodage appliqué au second signal codé ; et un moyen de comparaison des premier et second signaux de suivi et de fourniture de la mesure de la qualité de perception. Selon un exemple de réalisation de l'invention, le décodage consiste en l'application de fonctions élémentaires, le moyen adapté à fournir le second signal de suivi étant en outre adapté à déterminer l'ordre d'application des fonctions élémentaires au second signal codé et à déterminer des signaux de temporisation représentatifs des instants de début d'application des fonctions élémentaires au second signal codé à partir de l'ordre d'application des fonctions élémentaires et de durées mémorisées d'application des fonctions élémentaires.The present invention also provides a non-intrusive device for measuring the quality of perception by a user of a multimedia signal provided by a receiver, said multimedia signal being obtained by a decoding of a first coded signal received by the receiver from a network. of packet data transmission, the first coded signal corresponding to a second coded signal supplied to the network by a transmitter and obtained by coding an initial multimedia signal, the device comprises means arranged at the receiver and adapted to provide a first tracking signal representative of the decoding process or simulation of the decoding applied to the first coded signal; means disposed at the transmitter and adapted to apply the decoding or simulation of the decoding to the second coded signal and to provide a second tracking signal representative of the coding progress or simulation of the decoding applied to the second coded signal; and a means for comparing the first and second signals for monitoring and providing the perception quality measurement. According to an exemplary embodiment of the invention, the decoding consists of the application of elementary functions, the means adapted to provide the second tracking signal being further adapted to determine the order of application of the elementary functions to the second coded signal. and determining timing signals representative of the start times of application of the elementary functions to the second coded signal from the order of application of the elementary functions and stored durations of application of the elementary functions.
Selon un exemple de réalisation de l'invention, les durées mémorisées dépendent du récepteur.According to an exemplary embodiment of the invention, the stored durations depend on the receiver.
Selon un exemple de réalisation de l'invention, le décodage consiste en l'application de fonctions élémentaires, le moyen adapté à fournir le premier signal de suivi étant en outre adapté à déterminer l'ordre d'application des fonctions élémentaires au premier signal codé et à déterminer des signaux de temporisation représentatifs des instants de début d'application des fonctions élémentaires au premier signal codé à partir de l'ordre d'application des fonctions élémentaires et de durées mémorisées d'application des fonctions élémentaires.According to an exemplary embodiment of the invention, the decoding consists of the application of elementary functions, the means adapted to provide the first tracking signal being further adapted to determine the order of application of the elementary functions to the first coded signal and determining timing signals representative of the start times of application of the elementary functions to the first coded signal from the order of application of the elementary functions and stored durations of application of the elementary functions.
Selon un exemple de réalisation de l'invention, le moyen de comparaison est disposé au niveau du récepteur, l'émetteur étant en outre adapté à transmettre au récepteur le second signal de suivi par 1 ' intermédiaire du réseau paral¬ lèlement au second signal codé.According to an exemplary embodiment of the invention, the comparison means is arranged at the receiver, the transmitter being further adapted to transmit to the receiver the second tracking signal via the network paral ¬ parallel to the second coded signal .
Selon un exemple de réalisation de l'invention, le dispositif comprend au moins un récepteur supplémentaire four¬ nissant le signal multimédia par décodage du premier signal codé reçu par le récepteur supplémentaire depuis le réseau de trans¬ mission de données par paquets, l'émetteur comprenant un moyen de détermination de signaux de temporisation supplémentaires représentatifs des instants de début d'application des fonctions élémentaires au second signal codé à partir de l ' ordre d'application des fonctions élémentaires et de durées mémorisées d'application des fonctions élémentaires qui dépendent du récepteur supplémentaire .According to an exemplary embodiment of the invention, the device comprises at least one additional receiver oven ¬ ning multimedia signal by decoding the first encoded signal received by the receiver from the additional ¬ trans mission packet data network, the transmitter comprising means for determining additional timing signals representative of the start times of application of the elementary functions to the second coded signal from the order of application of the elementary functions and stored durations basic functions that depend on the additional receiver.
Selon un exemple de réalisation de l'invention, le récepteur comprend un moyen de fourniture d'un premier signal d'horloge destiné à la synchronisation du fonctionnement du récepteur et l'émetteur comprend un moyen de fourniture d'un second signal d'horloge destiné à la synchronisation du fonc¬ tionnement de l'émetteur, le premier signal d'horloge et le second signal d'horloge n'étant pas synchrones.According to an exemplary embodiment of the invention, the receiver comprises means for supplying a first clock signal intended to synchronize the operation of the receiver and the transmitter comprises means for supplying a second clock signal. for synchronization ¬ func tioning of the transmitter, the first clock signal and the second clock signal are not synchronous.
Selon un exemple de réalisation de l'invention, le moyen de fourniture de la mesure de la qualité de perception fournit un signal de mesure de la qualité de perception au moins partiellement identique au signal de mesure de la qualité de perception obtenu par un procédé objectif ou subjectif de mesure standardisé. Brève description des dessinsAccording to an exemplary embodiment of the invention, the means for providing the perception quality measurement provides a signal for measuring the perception quality at least partially identical to the signal for measuring the quality of perception obtained by an objective method. or subjective standardized measurement. Brief description of the drawings
Ces objets, caractéristiques et avantages, ainsi que d'autres de la présente invention seront exposés en détail dans la description suivante d'exemples de réalisation particuliers faite à titre non-limitatif en relation avec les figures jointes parmi lesquelles : la figure 1 représente schématiquement un premier exemple de réalisation d'un dispositif de mesure de la qualité de perception d'un signal multimédia transmis sur un réseau de transmission de données par paquets ; la figure 2 représente un schéma par blocs d'un exemple d'algorithme mis en oeuvre par un décodeur ; la figure 3 représente un exemple de séquence de signaux générés et utilisés par le procédé de mesure selon la présente invention ; la figure 4 illustre la durée de fonctionnement du premier exemple de réalisation du dispositif de mesure selon l'invention par rapport à la durée de fonctionnement d'un décodeur ; et la figure 5 représente un exemple de structure différentielle classique d'un codeur de signal multimédia. Description détailléeThese and other objects, features and advantages of the present invention will be set forth in detail in the following description of particular embodiments given in a non-limiting manner with reference to the attached figures in which: FIG. 1 schematically represents a first exemplary embodiment of a device for measuring the perception quality of a multimedia signal transmitted over a packet data transmission network; FIG. 2 represents a block diagram of an exemplary algorithm implemented by a decoder; FIG. 3 represents an example of a sequence of signals generated and used by the measuring method according to the present invention; FIG. 4 illustrates the duration of operation of the first embodiment of the measuring device according to the invention with respect to the operating time of a decoder; and FIG. 5 represents an example of a conventional differential structure of a multimedia signal coder. detailed description
Par souci de clarté, de mêmes éléments ont été dési¬ gnés par de mêmes références aux différentes figures et seuls les éléments nécessaires à la compréhension de la présente invention ont été représentés .For clarity, the same elements have been desig ¬ nated with the same reference to the various figures and only the elements necessary for understanding the present invention are shown.
La présente invention consiste, pour estimer la qualité de perception par un utilisateur d'un signal multimédia transmis sur un réseau entre un émetteur et un récepteur, à déterminer les différences entre l'exécution d'un traitement appliqué au signal multimédia fourni par l'émetteur et l'exécution du même traitement appliqué au signal multimédia reçu par le récepteur. Pour ce faire, la présente invention utilise le fait qu'un signal multimédia est pratiquement toujours transmis sur un réseau de transmission de données par paquets sous une forme codée. Le codage du signal multimédia est réalisé par un codeur prévu au niveau de l ' émetteur et le décodage du signal multimédia est réalisé par un décodeur prévu au niveau du récepteur . Le codage correspond généralement à un procédé de compression du signal multimédia. La présente invention consiste alors à prévoir un décodeur au niveau de l'émetteur identique au décodeur du récepteur et à comparer le fonctionnement du décodeur de l'émetteur et du décodeur du récepteur. En pratique,The present invention consists, to estimate the quality of perception by a user of a multimedia signal transmitted over a network between a transmitter and a receiver, to determine the differences between the execution of a processing applied to the multimedia signal provided by the transmitter and execution of the same processing applied to the multimedia signal received by the receiver. To do this, the present invention utilizes the fact that a multimedia signal is almost always transmitted over a packet data network in coded form. The coding of the multimedia signal is carried out by an encoder provided at the transmitter and the decoding of the multimedia signal is carried out by a decoder provided at the receiver. The coding is generally a method of compressing the multimedia signal. The present invention then consists in providing a decoder at the level of the transmitter identical to the decoder of the receiver and in comparing the operation of the decoder of the transmitter and the decoder of the receiver. In practice,
11 est généralement plus simple de prévoir, au niveau du récepteur, un décodeur simulé qui effectue une simulation du fonctionnement du décodeur du récepteur et de prévoir, au niveau de l'émetteur, un décodeur simulé identique au décodeur simulé du récepteur. On compare alors les différences de fonctionnement des décodeurs simulés. De telles différences de fonctionnement sont représentatives de la capacité du décodeur 18 du récepteurIt is generally simpler to provide, at the receiver, a simulated decoder which simulates the operation of the receiver decoder and to provide, at the transmitter, a simulated decoder identical to the simulated decoder of the receiver. The operating differences of the simulated decoders are then compared. Such differences in operation are representative of the capacity of the decoder 18 of the receiver
12 à reproduire à l'identique le signal multimédia reçu par le codeur 16 côté émetteur 10. A partir des différences ainsi déterminées, la présente invention permet de mesurer la qualité de transmission du signal multimédia sur le réseau et d'en déduire une mesure de la qualité de perception du signal multimédia par un utilisateur.12 to reproduce identically the multimedia signal received by the encoder 16 on the transmitter side 10. From the differences thus determined, the present invention makes it possible to measure the quality of transmission of the multimedia signal on the network and to deducing a measure of the perception quality of the multimedia signal by a user.
La figure 1 représente un premier exemple de réali¬ sation de la présente invention dans lequel un émetteur 10 reçoit un signal multimédia numérique SJVJULT et transmet le signal SJVJULT à un récepteur 12 par l'intermédiaire d'un réseau 14 de transmission de données par paquets. Le récepteur 12 restitue un signal multimédia numérique S'JVJULT qui, lorsque le réseau 14 fonctionne correctement, est identique au signal SjypjLT . A titre d'exemple, l'émetteur 10 ou le récepteur 12 peut correspondre à un ordinateur, à un modem ou à un terminal de réception ou de fourniture de sons ou d'images. L'émetteur 10 comprend un codeur 16 qui reçoit le signal SjyjuLT' réalise une opération de codage du signal SJVJULT et fournit un signal codé SQQD au réseau 14. Le récepteur 12 reçoit un signal S'QQD transmis par le réseau 14. Le signal S'QQD est ^e résultat de la transmission par le réseau 14 du signal SQQD et est dégradé par les phénomènes précédemment mentionnés et mesurés par les paramètres tels que la bande passante, la latence, la gigue et le taux de perte par paquets. Le récepteur 12 comprend un décodeur 18 qui reçoit le signal S'QQD et réalise une opération de décodage sur le signal S'QQD pour fournir le signal multimédia S'JVJULT-1 shows a first exemplary Réali ¬ tion of the present invention wherein a transmitter 10 receives a digital multimedia signal and passes the SJVJULT SJVJULT signal to a receiver 12 via a network 14 for transmitting packet data . The receiver 12 outputs a S'JVJULT digital multimedia signal which, when the network 14 operates correctly, is identical to S j signal yp j LT. For example, the transmitter 10 or the receiver 12 may correspond to a computer, a modem or a terminal for receiving or providing sounds or images. The transmitter 10 comprises an encoder 16 which receives the signal SjyjuLT 'carries out a coding operation of the signal SJVJULT and supplies a coded signal SQQD to the network 14. The receiver 12 receives a signal S'QQD transmitted by the network 14. The signal S 'QQD is ^ e result of the transmission by the network 14 of SQQD signal and is degraded by the above-mentioned phenomena and measured by parameters such as bandwidth, latency, jitter and packet loss rate. The receiver 12 comprises a decoder 18 which receives the signal S'QQD and performs a decoding operation on the signal S'QQD to provide the multimedia signal S'JVJULT-
A titre d'exemple, le codeur 16 réalise une opération de compression du signal multimédia SJVJULT et le décodeur 18 réalise l'opération de décompression correspondante. A titre d'exemple, les opérations de compression et de décompression correspondent à des algorithmes de compression/décompression de signaux vocaux, par exemple tels que définis par les standards G722, G723, G726, G728 et G729, à des algorithmes de compression/décompression de signaux musicaux, par exemple tels que définis par les standards MPEGl, MPEG2 AAC et MPEG4 AAC ou à des algorithmes de compression/décompression d'images, par exemple tels que définis par les standards JPEG, JPEG2000, MPEGl, MPEG2, MPEG4, H261, H263 et H264. Dans ces standards utilisés en télécommunications, les décodeurs sont définis par les spécifications du standard. Les structures des décodeurs sont généralement mises à disposition du public, de façon gratuite ou payante. On peut alors facilement réaliser un déco¬ deur simulé qui réalise une simulation exacte ou avec plus ou moins de détails du fonctionnement du décodeur.By way of example, the encoder 16 carries out a compression operation of the multimedia signal SJVJULT and the decoder 18 performs the corresponding decompression operation. By way of example, the compression and decompression operations correspond to voice signal compression / decompression algorithms, for example as defined by the G722, G723, G726, G728 and G729 standards, with compression / decompression algorithms. musical signals, for example as defined by the MPEG1, MPEG2 AAC and MPEG4 AAC standards or to image compression / decompression algorithms, for example as defined by the JPEG, JPEG2000, MPEG1, MPEG2, MPEG4, H261 standards; , H263 and H264. In these standards used in telecommunications, decoders are defined by the specifications of the standard. The decoder structures are generally available to the public, free of charge or for a fee. We can then easily make a deco ¬ deur simulated that performs an exact simulation or with varying details of the operation of the decoder.
La présente invention consiste à comparer le comportement du décodeur 18, ou d'un élément simulant le comportement du décodeur 18, avec un décodeur identique, ou un autre élément simulant le comportement du décodeur 18, qui est disposé au niveau de l'émetteur 10 et qui reçoit le signal SQQD- Selon le premier exemple de réalisation, on prévoit, au niveau de l'émetteur 10, un premier décodeur simulé 20 recevant le signal SQQD et fournissant un signal de suivi S^ et au niveau du récepteur 12, un second décodeur simulé 22, identique au premier décodeur simulé 20, recevant le signal S'QQD et fournissant un signal de suivi S 1^. Les décodeurs simulés 20, 22 peuvent être mis en oeuvre sous forme logiciel, correspondre à des circuits électroniques dédiés ou être partiellement mis en oeuvre sous forme logicielle et partiellement correspondre à des circuits électroniques dédiés. Ils effectuent sur les signaux SQQD et S' COD une simulation de décodage comprenant la même succession d'étapes que le décodage réalisé par le décodeur 18. Les signaux S^ et S'τ sont représentatifs du déroulement de la simulation de décodage lors du fonctionnement respectif des décodeurs 20, 22. Le signal S^ est fourni au récepteur 12 par l'intermédiaire du réseau 14.The present invention consists in comparing the behavior of the decoder 18, or of an element simulating the behavior of the decoder 18, with an identical decoder, or another element simulating the behavior of the decoder 18, which is arranged at the transmitter 10 and which receives the signal SQQD- According to the first exemplary embodiment, there is provided, at the transmitter 10, a first simulated decoder 20 receiving the signal SQQD and providing a tracking signal S ^ and at the receiver 12, a second simulated decoder 22, identical to the first simulated decoder 20, receiving the S'QQD signal and providing a tracking signal S 1 ^. The simulated decoders 20, 22 can be implemented in software form, correspond to dedicated electronic circuits or be partly implemented in software form and partly correspond to dedicated electronic circuits. They perform on the SQQD and S 'COD signals a decoding simulation comprising the same succession of steps as the decoding performed by the decoder 18. The signals S ^ and S'τ are representative of the progress of the decoding simulation during operation. respective decoders 20, 22. The signal S ^ is supplied to the receiver 12 via the network 14.
L'appréciation de la qualité de perception du signal multimédia est alors obtenue à partir d'une comparaison des signaux S^ et S ' ^ selon des critères qui seront décrits plus en détails par la suite. Ceci est réalisé par l'intermédiaire d'un module de comparaison 24 fournissant un signal Q représentatif de la qualité de la perception du signal multimédia par un utilisateur. Le module de comparaison 24 peut être prévu au niveau du récepteur 12 ou peut être disposé au niveau d'un autre noeud du réseau 14. Selon le premier exemple de réalisation, on compare les déroulements des simulations de décodage mises en oeuvre par les décodeurs simulés 20, 22 recevant respectivement les signaux SQQD et S'cOD- Pour ce faire, en considérant que la simulation de décodage correspond, comme pour le décodage, à l'exécution d'une suite de fonctions élémentaires selon un algorithme particulier, on détermine les instants d'appel des fonctions élémentaires lors du déroulement de la simulation de décodage .The perception of the perception quality of the multimedia signal is then obtained from a comparison of the signals S 1 and S 2 according to criteria which will be described in more detail below. This is achieved by means of a comparison module 24 providing a signal Q representative of the quality of the perception of the multimedia signal by a user. The comparison module 24 can be provided at the receiver 12 or can be arranged at another level. network node 14. According to the first exemplary embodiment, the sequences of the decoding simulations implemented by the simulated decoders 20, 22 receiving respectively the signals SQQD and S'cOD- are compared, for this purpose, considering that the simulation of decoding corresponds, as for the decoding, to the execution of a series of elementary functions according to a particular algorithm, the instants of call of the elementary functions are determined during the course of the decoding simulation.
Le premier exemple de réalisation permet avanta¬ geusement de ne pas perturber le fonctionnement du codeur 16 et du décodeur 18 puisque les décodeurs simulés 20, 22 fonctionnent en parallèle du codeur 16 et du décodeur 18. En outre, selon le premier exemple de réalisation, la simulation de décodage effectuée par les décodeurs simulés 20, 22 est moins complexe que le décodage réellement mis en oeuvre par le décodeur 18. Pour ce faire, on prévoit que la simulation de décodage suit un algorithme qui est identique à l'algorithme du décodage mis en oeuvre par le décodeur 18, mais que les fonctions élémentaires utilisées par la simulation de décodage n'effectuent pas la totalité des calculs normalement prévus lorsqu'un décodage réel est effectué. La mise en oeuvre d'une simulation de décodage par les décodeurs simulés 20, 22 permet de limiter les ressources (par exemple la charge de calcul du processeur de l'émetteur 10 ou du récepteur 12) nécessaires au fonctionnement des décodeurs simulés 20, 22. En effet, certaines fonctions élémentaires géné¬ ralement complexes mises en oeuvre par le décodeur 18, par exemple le calcul de transformées de Fourier rapides dans le cas d'une opération de décompression, ne sont pas exécutées au moins en totalité par les décodeurs simulés 20, 22.The first embodiment allows avanta ¬ geusement not disturb the operation of the encoder 16 and the decoder 18 since the simulated decoders 20, 22 operate in parallel from the encoder 16 and the decoder 18. Furthermore, according to the first exemplary embodiment, the decoding simulation performed by the simulated decoders 20, 22 is less complex than the decoding actually implemented by the decoder 18. To do this, it is expected that the decoding simulation follows an algorithm which is identical to the decoding algorithm. implemented by the decoder 18, but that the elementary functions used by the decoding simulation do not perform all the calculations normally expected when real decoding is performed. The implementation of a decoding simulation by the simulated decoders 20, 22 makes it possible to limit the resources (for example the calculation load of the processor of the transmitter 10 or of the receiver 12) necessary for the operation of the simulated decoders 20, 22 . Indeed, some elementary functions gen ¬ rattle complex implemented by the decoder 18, for example the calculation of fast Fourier transforms in the case of a decompression operation, are not executed at least in full by simulated decoders 20, 22.
Selon une variante du premier exemple de réalisation, la simulation de décodage peut suivre un algorithme qui est plus simple que l'algorithme de décodage et qui, par exemple, ne comprend que les étapes principales de l'algorithme de décodage. De façon plus détaillée, on considère que la simu¬ lation de décodage réalisée par les décodeurs simulés 20, 22 fait appel à N fonctions élémentaires, Fonction-^, i étant un entier compris entre 1 et N. Le signal SQQD est constitué d'une suite de paquets de données, paquet^, où k est un entier naturel. Pour chaque paquet de données, paquet^, le décodeur simulé 20 détermine des signaux tempo^ j_(t), i étant un entier compris entre 1 et N, chaque signal tempo^ -j_(t) étant repré¬ sentatif des instants d'appel d'une fonction élémentaire particulière Fonction-^. On obtient alors, au fur et à mesure du traitement du signal SQQD' des signaux tempo-j_(t), i variant de 1 à N, correspondant chacun à la suite des signaux tempo^ -j_(t). Le décodeur simulé 20 effectue un traitement des signaux tempo-j_(t) pour fournir le signal Sj de façon à limiter l'occupation du réseau lorsque le signal Sj est transmis parallèlement au signal ScOD et à ne pas dégrader les performances initiales de transmission du signal SQQD (c'est-à-dire en l'absence de transmission du signal S^). De façon analogue, le signal S'QQD est constitué d'une succession de paquets de données, paquet ']_, où 1 est un entier naturel, qui, si la transmission n'était pas perturbée, serait égale à la succession de paquets de données paquet^. Pour chaque paquet de données, paquet ']_, le décodeur simulé 22 détermine des signaux tempo 1^ -j_(t) selon le même procédé que celui mis en oeuvre pour la détermination des signaux tempo^ j_(t). On obtient alors, au fur et à mesure du traitement du signal S'QQD' des signaux tempo' j_ (t) , i variant de 1 à N. Le décodeur simulé 22 détermine alors le signal S'j a partir des signaux tempo' -j_(t) selon le même procédé utilisé pour la détermination du signal Sj.According to a variant of the first exemplary embodiment, the decoding simulation may follow an algorithm which is simpler than the decoding algorithm and which, for example, includes only the main steps of the decoding algorithm. In more detail, it is considered that the simu lation ¬ decoding performed by the simulated decoders 20, 22 uses N elementary functions Function- ^, i being an integer between 1 and N. The SQQD signal consists of a sequence of data packets, packet ^, where k is a natural number. For each data packet, packet ^, the simulated decoder 20 determines signals tempo ^ j_ (t), i being an integer between 1 and N, each tempo -j_ ^ (t) signal being repre sentative ¬ instants of call of a particular elementary function Function ^. Thus, as the signal SQQD 'is processed, signals tempo-j (t), i varying from 1 to N, each corresponding to the sequence of the signals tempo jj (t), are obtained. The simulated decoder 20 performs a signal processing tempo-j (t) to provide the signal S j so as to limit the occupation of the network when the signal S j is transmitted parallel to the signal ScOD and not to degrade the initial performance of transmission of the SQQD signal (ie in the absence of transmission of the signal S ^). Similarly, the signal S'QQD consists of a succession of data packets, packet ' ] _, where 1 is a natural integer, which, if the transmission was not disturbed, would be equal to the sequence of packets package data ^. For each packet of data, packet ' ] _, the simulated decoder 22 determines tempo signals 1 ^ -j (t) according to the same method as that used for the determination of the signals tempo ^ j (t). One then obtains, as and measurement processing S'QQD signal tempo signals j_ (t), i varying from 1 to N. The simulated decoder 22 then determines the signal S 'j from signal tempo' by the same method used for the determination of the signal S j .
Le premier exemple de réalisation du procédé de mesure selon l'invention ne consiste donc pas à mesurer la qualité intrinsèque du signal multimédia S'JVPJLT mais à analyser des différences de fonctionnement entre le décodeur simulé 22 recevant le signal S'QQD et ^e décodeur simulé 20 recevant le signal SQQD- Le décodeur simulé 20, 22 permet d'estimer quels sont les instants d'appel des fonctions élémentaires lors du décodage de paquets de données par le décodeur 18. Lors de l'exécution de la simulation de décodage par les décodeurs simulés 20, 22, les fonctions élémentaires sont appelées selon la même séquence d'appel que lors de l'exécution du décodage par le décodeur 18, mais les fonctions élémentaires proprement dites, telles que le calcul de transformées de Fourier rapide, ne sont pas exécutées au moins en totalité. Pour déterminer quels seraient les instants d'appel des fonctions élémentaires si le décodage était réellement mis en oeuvre au niveau des décodeurs simulés 20, 22, on utilise une estimation de la durée d'exécution des fonctions élémentaires. Les décodeurs simulés 20, 22 déterminent, pour chaque paquet de données, paquet^, les instants d'appel de chaque fonction élémentaire, Fonction-^, i étant un entier compris entre 1 et N, formant alors les signaux tempok?i(t) .The first embodiment of the measurement method according to the invention does not consist in measuring the intrinsic quality of the multimedia signal S'JVPJLT but to analyze differences in operation between the simulated decoder 22 receiving the signal and S'QQD ^ e decoder simulated 20 receiving the signal SQQD- The simulated decoder 20, 22 makes it possible to estimate which are the instants of call of the elementary functions during the decoding of data packets by the decoder 18. During the execution of the decoding simulation by the simulated decoders 20, 22, the elementary functions are called according to the same sequence of call only during the execution of the decoding by the decoder 18, but the elementary functions themselves, such as the calculation of fast Fourier transforms, are not executed at least in full. To determine what would be the calling instants of the elementary functions if the decoding was actually implemented at the level of the simulated decoders 20, 22, an estimate of the execution time of the elementary functions is used. The simulated decoders 20, 22 determine, for each packet of data, packet,, the calling instants of each elementary function,--function, i being an integer between 1 and N, then forming the tempo signals k i ( t).
La durée d'exécution T-j_ de chaque fonction Fonction-^ est préalablement mémorisée et peut correspondre de façon non exclusive :The execution time of T j ^ _ each function- function is previously stored and can match not limited to:
- à une durée estimée basée sur les technologies de fabrication du ou des processeurs ou des circuits dédiés aux calculs mis en oeuvre par la fonction élémentaire Fonction-^ ;at an estimated time based on the manufacturing technologies of the processor (s) or circuits dedicated to the calculations implemented by the elementary function Function (-);
- à une durée théorique déterminée à partir de la complexité des calculs mis en oeuvre par la fonction élémentaire Fonction-^ ; ou- at a theoretical duration determined from the complexity of the calculations implemented by the elementary function Function-^; or
- à une durée sélectionnée parmi un ensemble de durées mesurées au préalable en faisant fonctionner le décodeur 18 sur des noeuds du réseau 14 ayant des structures différentes, par exemple des ordinateurs ayant des processeurs réalisés selon des technologies différentes. Dans ce dernier cas, le décodeur simulé 20, 22 choisit la durée T-j_ adaptée en fonction des caractéristiques techniques détectées de l'émetteur 10 ou du récepteur 12.at a time selected from a set of durations measured beforehand by operating the decoder 18 on nodes of the network 14 having different structures, for example computers having processors made according to different technologies. In the latter case, the simulated decoder 20, 22 chooses the duration T-j_ adapted according to the detected technical characteristics of the transmitter 10 or the receiver 12.
Lors de l'estimation au préalable des durées T-j_, i étant un entier compris entre 1 et N, il est bien sûr tenu compte du fait que l'opération de décodage peut être effectuée par plusieurs processeurs, éventuellement réalisés selon des technologies différentes, ou être effectuée en partie de façon logicielle ou en partie par des circuits dédiés. En particulier, les fonctions Fonction-^ peuvent être effectuées, sur un même récepteur, par des processeurs différents.When estimating in advance the durations T-j_, i being an integer between 1 and N, it is of course required account of the fact that the decoding operation can be performed by several processors, possibly made according to different technologies, or be carried out partly in software or in part by dedicated circuits. In particular, the function functions can be performed on the same receiver by different processors.
Dans le cas où l'émetteur 10 connaît les caracté¬ ristiques techniques du récepteur 12, il utilise de préférence les durées T-j_ estimées ou mesurées au préalable qui correspon¬ dent à de telles caractéristiques techniques. Dans le cas où l'émetteur 10 ne peut pas accéder aux caractéristiques techniques du récepteur 12, l'émetteur 10 peut utiliser des durées théoriques.In the case where the transmitter 10 knows the charac ¬ technical data receiver 12, it preferably uses the durations T-j_ estimated or measured beforehand which corre ¬ tooth to such specifications. In the case where the transmitter 10 can not access the technical characteristics of the receiver 12, the transmitter 10 can use theoretical durations.
Le signal Sj est obtenu à partir d'un prétraitement des signaux tempo-j_(t) afin de réduire la taille des informations qui sont transmises en parallèle du signal codé SQQD afin de ne pas perturber et fausser les mesures de la transmission. Ce prétraitement correspond par exemple à une analyse des signaux tempo-j_(t) pour en extraire une information synthétique véhiculée sur le réseau 14. Un prétraitement identique est réalisé sur les signaux tempo '-j_(t) pour obtenir le signal S 1^. A titre d'exemple, le prétraitement peut consister à réaliser :The signal S j is obtained from a pretreatment of the tempo-j signals (t) in order to reduce the size of the information that is transmitted in parallel with the SQQD coded signal in order not to disturb and distort the transmission measurements. This pretreatment corresponds for example to an analysis of the signals tempo-j (t) to extract a synthetic information conveyed on the network 14. An identical pretreatment is performed on the signals tempo -j_ (t) to obtain the signal S 1 ^ . By way of example, the pretreatment may consist of carrying out:
- un codage RLE (acronyme anglais pour Run Length Encoding) des signaux tempo-j_(t) ;an RLE coding (acronym for Run Length Encoding) of the signals tempo-j (t);
- une interpolation linéaire des signaux tempo-j_(t) pondérés selon les fonctions élémentaires Fonction-^ ; une transformation fréquentielle des signaux tempo-jjt) ;a linear interpolation of the tempo-j (t) signals weighted according to the elementary functions. a frequency transformation of the tempo-jjt signals);
- une analyse par la méthode des moindres carrés et extraction des valeurs principales ; ou- a least squares analysis and extraction of the main values; or
- une analyse par réseau de neurones.- a neural network analysis.
Les pertes de paquets, les variations du débit et de la latence lors de la transmission de paquets au travers du réseau 14 se traduisent par des différences entre les signaux tempo-j_(t) et tempo' -j_(t) obtenus respectivement à partir des signaux SQQD et S'QQD- L'analyse des différences permet d'apprécier la qualité de la reproduction du signal S'jypjL après transmission. Pour ce faire, le module de comparaison 24 détermine le signal Q selon la relation suivante :The packet losses, the variations in the rate and the latency during the transmission of packets through the network 14 result in differences between the signals tempo-j_ (t) and tempo '-j_ (t) respectively obtained from SQQD and S'QQD signals - Difference analysis allows to appreciate the quality of the reproduction of the signal S ' j yp j L after transmission. For this purpose, the comparison module 24 determines the signal Q according to the following relation:
Q=Compare(Sτ, S'τ) où Compare est une fonction mathématique appliquée aux signaux Sτ et S'τ.Q = Compare (S τ , S ' τ ) where Compare is a mathematical function applied to the signals S τ and S' τ .
A titre d'exemple, la fonction "Compare" correspond à une corrélation linéaire, un filtrage optimal, une fonction de calcul de coûts, un réseau de neurones, etc., et peut être étalonnée pour reproduire différents procédés classiques, subjectifs ou objectifs, de mesure de la qualité perçue par un utilisateur. L'étalonnage peut se faire par régression sur un banc de mesure en utilisant les signaux de référence du procédé de mesure classique et en mesurant la note obtenue avec la fonction "Compare" choisie. Par régression, on adapte la fonc¬ tion "Compare" pour que le signal Q approche la note qui serait fournie par le procédé de mesure classique avec un niveau de précision donné. A titre d'exemple, le signal Q correspond au coefficient selon la norme "Mean Opinion Score" (qui est normalisée dans les recommandations ITU-T P.800, P.830, P.11).By way of example, the "Compare" function corresponds to a linear correlation, an optimal filtering, a cost calculation function, a neural network, etc., and can be calibrated to reproduce various conventional, subjective or objective methods, measuring the quality perceived by a user. The calibration can be done by regression on a test bench using the reference signals of the conventional measuring method and by measuring the note obtained with the selected "Compare" function. Regression, we adapt the func ¬ "Compare" to the Q signal approaches the note would be provided by the conventional measuring method with a given level of precision. For example, the signal Q corresponds to the coefficient according to the "Mean Opinion Score" standard (which is standardized in the recommendations ITU-T P.800, P.830, P.11).
La figure 2 représente un exemple schématique d'un algorithme de simulation de décodage mis en oeuvre par les décodeurs simulés 20, 22 et comprenant cinq fonctions élémen¬ taires Fonction-^, i étant un entier compris entre 1 et 5. A titre d'exemple, chaque signal binaire tempo^ -j_(t) est un signal binaire mis à un premier niveau de référence, correspondant par exemple à la valeur logique "1", pendant un cycle de fonctionnement du décodeur simulé 20, 22 à l'appel de la fonction Fonction-^ de même indice et maintenu à un second niveau de référence, correspondant par exemple à la valeur logique "0", dans le cas contraire.2 shows a schematic example of a decoding simulation algorithm implemented by the simulated decoders 20, 22 and comprising five functions elemen tary Function- ¬ ^, i being an integer between 1 and 5. By way of for example, each binary signal tempo ^ -j_ (t) is a binary signal set at a first reference level, corresponding for example to the logic value "1", during a cycle of operation of the simulated decoder 20, 22 on the call function Function ^ of the same index and maintained at a second reference level, corresponding for example to the logic value "0", in the opposite case.
La figure 3 représente les signaux tempo^ ]_ à tempo^ 5 déterminés par le décodeur simulé 20 appliquant une simulation de décodage à un paquet de données, paquet^, selon l'algorithme représenté en figure 2. Les durées d'exécution T]_ à T5 sont comptées à partir d'un instant de démarrage t^ de la simulation de décodage du paquet paquet^ du signal SQQD transmis par l'émetteur 10 et sont mesurées avec l'horloge locale de l'émetteur 10. Pour le décodeur 22, les durées T]_ à T5 utilisées pour la détermination des signaux tempo 1^ -j lors du traitement d'un paquet paquet]_ du signal S'QQD reÇu Par Ie récepteur 12 sont mesurées avec l'horloge locale du récepteur 12. Il n'est ainsi pas nécessaire que les horloges de l'émetteur 10 et du récepteur 12 soient synchronisées lors de la détermination des signaux tempos j_ et tempo ' 1 j •3 shows the signals tempo ^] _ ^ 5 in tempo determined by the simulated decoder 20 applies a decoding simulation in a data packet, packet ^, according to the algorithm shown in Figure 2. The execution times T] _ to T5 are counted from a start instant t ^ of the decoding simulation of the packet packet ^ of the signal SQQD transmitted by the transmitter 10 and are measured with the local clock of the transmitter 10. For the decoder 22, the durations T] _ to T5 used for the determination of signals tempo 1 ^ -j when processing a packet package] _ signal S'QQD re Ç u I n I e receiver 12 are measured with the receiver local clock 12 It is thus not necessary for the clocks of the transmitter 10 and of the receiver 12 to be synchronized when determining the time and tempo signals.
La figure 4 illustre, en partie gauche, la durée d'une opération de décodage d'un paquet de données réalisée par le décodeur 18 selon l'algorithme de la figure 2, et, en partie droite, la durée d'une opération de simulation de décodage du même paquet de données par le décodeur simulé 22 selon le même algorithme. La figure 4 met en évidence le fait que la durée de fonctionnement du décodeur 18 est supérieure à la durée de fonctionnement du décodeur simulé 20, ce qui traduit bien le fait que le fonctionnement du décodeur 18 requiert davantage de ressources que le fonctionnement du décodeur simulé 20, 22. La zone hachurée 30 représente la durée disponible obtenue lors du fonctionnement du décodeur simulé 20. Ce gain de temps est dû au fait que la détermination des signaux tempo^ -j_(t) utilise les durées des fonctions élémentaires Fonction-^ qui sont stockées au préalable au niveau de 1 ' émetteur et du récepteur .FIG. 4 illustrates, in the left-hand part, the duration of a decoding operation of a data packet carried out by the decoder 18 according to the algorithm of FIG. 2, and, in the right part, the duration of an operation of simulation of decoding the same data packet by the simulated decoder 22 according to the same algorithm. FIG. 4 highlights the fact that the operating time of the decoder 18 is greater than the operating time of the simulated decoder 20, which clearly reflects the fact that the operation of the decoder 18 requires more resources than the operation of the simulated decoder. 20, 22. The hatched area 30 represents the available time obtained during the operation of the simulated decoder 20. This saving of time is due to the fact that the determination of the signals tempo ^ -j (t) uses the durations of the elementary functions. which are stored beforehand at the transmitter and the receiver.
Il peut être avantageux de déterminer la durée totale τtot (paquet^) de traitement du paquet, paquet^, selon la relation suivante :It may be advantageous to determine the total time τ tot (packet ^) of processing the packet, packet ^, according to the following relation:
NNOT
Ttot(Paquetk) - ∑NbtjTj j=l où Nbjζ j est le nombre d'appels de la fonction élémentaire Fonctionj lors du traitement du paquet k.T to T (P quet k) - ΣNbtjTj j = l where Nb jζ j is the number of calls to the elementary function Fonctionj while processing the packet k.
En effet, la détermination de la durée totale Tto-|- de traitement de paquet par le décodeur simulé 20 permet de définir un critère de débordement de capacité de calcul du récepteur 12. En effet, en comparant la durée Tto-|- à une durée critique, , qui est la durée maximale allouée à un paquet pour être théoriquement traité, on peut détecter une surcharge éventuelle du décodeur 18 si la durée Tto-|- est supérieure à la durée critique. Une telle comparaison peut être réalisée au niveau de l'émetteur 10 par le décodeur simulé 20 qui utilise les durées T-L associées au récepteur 12. Le décodeur simulé 20 peut alors signaler au codeur 16 le risque de surcharge du décodeur 18, le codeur 16 pouvant alors modifier son comportement, par exemple en modifiant le débit d'émission. Une telle modification du comportement du codeur 16 est alors réalisée sans avoir besoin de prévoir que le récepteur 12 transmette vers l'émetteur 10 un signal indiquant un dépassement de capacité.Indeed, the determination of the total duration T to - | - Packet processing by the simulated decoder 20 makes it possible to define a calculation capacity overflow criterion of the receiver 12. Indeed, by comparing the duration T to - | at a critical time, which is the maximum duration allocated to a packet to be theoretically processed, it is possible to detect a possible overload of the decoder 18 if the duration T to - | - is greater than the critical duration. Such a comparison can be made at the level of the transmitter 10 by the simulated decoder 20 which uses the durations TL associated with the receiver 12. The simulated decoder 20 can then signal to the coder 16 the risk of overloading the decoder 18, the coder 16 being able to then modify its behavior, for example by modifying the transmission rate. Such a change in the behavior of the encoder 16 is then performed without the need to provide that the receiver 12 transmits to the transmitter 10 a signal indicating an overflow.
Selon un second exemple de réalisation de l'invention, le décodeur simulé 22 n'est pas présent et les signaux tempo1 -j_ (t) sont fournis directement par le décodeur 18. Dans ce cas, parallèlement à la fourniture du signal S'^ULT, ^e décodeur 18 fournit le signal S 1^. Les durées T-j_ peuvent alors correspondre aux durées exactes des fonctions élémentaires utilisées pendant le décodage. Le décodeur simulé 20 peut néanmoins être présent et fournir le signal Sj.According to a second embodiment of the invention, the simulated decoder 22 is not present and the tempo signals 1 -j (t) are provided directly by the decoder 18. In this case, parallel to the supply of the signal S ' ULT ^, ^ e decoder 18 provides the S signal 1 ^. The durations T 1 can then correspond to the exact durations of the elementary functions used during the decoding. The simulated decoder 20 may nevertheless be present and provide the signal S j .
Par ailleurs, pour de nombreuses applications, le codeur 16 et le décodeur 18 correspondent respectivement à un système de compression et à un système de décompression.Moreover, for many applications, the encoder 16 and the decoder 18 respectively correspond to a compression system and to a decompression system.
La figure 5 représente un exemple de système de compression 16 selon lequel, de façon très schématique, seule est transmise la variation entre :FIG. 5 represents an example of a compression system 16 according to which, very schematically, only the variation is transmitted between:
- l'échantillon courant du signal multimédia SJVJULT, des échantillons courants du signal multimédia SJVJULT ou d'un signal "transformé" déterminé lors du codage du signal multimédia SJVJULT ; et un ou plusieurs échantillons précédents et/ou ultérieurs du signal multimédia SjypjLτ(old) ou d'un signal "transformé" déterminé lors du codage du signal multimédia SjypjLT (old) en signal codé SQQD- Un tel système de compression 16 comprend un étage de codage 32 qui fournit le signal SQQD et un étage de décodage 34 qui reçoit le signal SQQD et fournit le signal SJVΠJLT (old) . La sortie de l'étage de décodage 34 attaque l'étage de codage 32. L'étage de décodage 34 est sensiblement identique au décodeur 18 du récepteur 12. Lorsque le système de compression 16 a une telle structure, les opérations effectuées par le décodeur simulé 20 peuvent être réalisées directement par l'étage de décodage 34. Le décodeur simulé 20 n'est alors plus présent. Dans ce cas, parallèlement à la fourniture du signal SJVPJLT (old) , l'étage de décodage 34 fournit le signal S^.the current sample of the multimedia signal SJVJULT, current samples of the multimedia signal SJVJULT or a "transformed" signal determined during the encoding of the multimedia signal SJVJULT; and one or more preceding and / or subsequent samples of the multimedia signal S j yp j Lτ (old) or of a "transformed" signal determined during the encoding of the multimedia signal SjypjLT (old) into a coded signal SQQD- Such a compression system 16 comprises a coding stage 32 which supplies the signal SQQD and a decoding stage 34 which receives the signal SQQD and supplies the signal SJVΠJLT (old). The output of the decoding stage 34 drives the coding stage 32. The decoding stage 34 is substantially identical to the decoder 18 of the receiver 12. When the compression system 16 has such a structure, the operations performed by the decoder simulated 20 can be performed directly by the decoding stage 34. The simulated decoder 20 is then no longer present. In this case, in parallel with the supply of the signal SJVPJLT (old), the decoding stage 34 supplies the signal S ^.
Les exemples de réalisation précédemment décrits ne considèrent qu'un seul récepteur 12 connecté à l'émetteur 10. Toutefois, pour de nombreuses applications, l'émetteur est connecté à plusieurs récepteurs, par exemple pour transmettre simultanément un même signal multimédia aux récepteurs. Lorsque l'émetteur comprend un seul décodeur simulé, les durées T-j_ utilisées pour la détermination des signaux tempo^ -j_(t) peuvent correspondre aux durées estimées ou mesurées au préalable pour le récepteur ayant les caractéristiques les moins favorables, c'est-à-dire les durées les plus longues. Selon une variante de l'invention, l'émetteur peut comprendre plusieurs décodeurs simulés, chaque décodeur simulé fournissant un signal de suivi S^ à l'un des récepteurs, ou à certains des récepteurs. Les décodeurs simulés peuvent être complètement distincts les uns des autres ou comprendre des portions communes, réalisées sous forme logicielle ou par des circuits dédiés. Chaque décodeur simulé peut alors utiliser des durées T-j_ estimées ou mesurées au préalable pour la détermination des signaux tempo^ -j_(t) qui sont adaptées au récepteur ou aux récepteurs auxquels l'émetteur est relié. Les durées utilisées par un décodeur simulé peuvent alors être différentes des durées par un autre décodeur simulé.The previously described embodiments only consider a single receiver 12 connected to the transmitter 10. However, for many applications, the transmitter is connected to several receivers, for example to simultaneously transmit the same multimedia signal to the receivers. When the transmitter comprises a single simulated decoder, the durations T-j used for the determination of the signals tempo -j (t) may correspond to the durations estimated or measured beforehand for the receiver having the least favorable characteristics. ie the longest durations. According to a variant of the invention, the transmitter may comprise several simulated decoders, each simulated decoder providing a tracking signal S 1 to one of the receivers or to some of the receivers. The simulated decoders can be completely separate from each other or comprise common portions, made in software form or by dedicated circuits. Each simulated decoder can then use durations T-1 estimated or measured beforehand for the determination of the signals that are adapted to the receiver or receivers to which the transmitter is connected. The times used by a simulated decoder can then be different from the durations by another simulated decoder.
La présente invention comprend de nombreux avantages :The present invention has many advantages:
- premièrement, elle permet l'obtention d'une mesure objective et non intrusive de la qualité de perception par un utilisateur d'un signal multimédia transmis sur un réseau de transmission de données par paquets, une telle mesure pouvant être réalisée de façon automatique et continue ;- firstly, it makes it possible to obtain an objective and non-intrusive measure of the quality of perception by a user of a multimedia signal transmitted over a packet data transmission network, such a measurement can be performed automatically and continuously;
- deuxièmement, elle prévoit seulement la transmission sur le réseau d'un signal de faible taille parallèlement au signal multimédia codé et donc ne perturbe pas ou peu les performances de transmission du réseau ; troisièmement, elle peut être mise en oeuvre facilement étant donné que, de façon générale, les structures des décodeurs, en particulier des systèmes de décompression, généralement utilisés pour le traitement des signaux multimédia sont largement divulguées et d'accès libre ; etsecondly, it only provides for the transmission on the network of a signal of small size parallel to the encoded multimedia signal and thus does not disturb or little the transmission performance of the network; thirdly, it can be implemented easily since, in general, the structures of decoders, in particular decompression systems, generally used for the processing of multimedia signals are widely disclosed and open access; and
- quatrièmement, elle permet de s'affranchir d'une synchronisation des horloges de référence entre l'émetteur 10 et le récepteur 12.fourthly, it makes it possible to dispense with a synchronization of the reference clocks between the transmitter 10 and the receiver 12.
Bien que la présente invention ait été décrite dans le cadre de la transmission d'un signal codé SQQD entre un émetteur 10 et un récepteur 12, il est clair qu'elle s'applique au cas où l'émetteur 36 et/ou le récepteur 12 correspondent à des transcodeurs. A titre d'exemple, dans le cas où le récepteur 12 correspond à un transcodeur, il comprend un codeur supplémentaire adapté à coder le signal S'^LT en un signal codé qui peut, par exemple, être transmis à nouveau sur le réseau de transmission de données par paquets 14. Le codage mis en oeuvre par le codeur supplémentaire du récepteur 12 peut ne pas être identique au codage mis en oeuvre au niveau de l'émetteur 10. Dans le cas où l'émetteur 10 correspond à un transcodeur, il reçoit un signal codé, issu par exemple du réseau 14, et comprend un décodeur adapté à décoder le signal codé reçu pour obtenir le signal multimédia SJVΠJLT- Le signal codé reçu par l'émetteur 10 peut avoir été codé par un codage différent de celui mis en oeuvre par le codeur 16 de l'émetteur 10. De ce fait, on peut obtenir une structure comprenant un émetteur initial, un transcodeur et un récepteur final reliés à un réseau de transmission de données par paquets, le procédé de mesure de la qualité de perception par un utilisateur précédemment décrit pouvant alors être mis en oeuvre entre l'émetteur initial et le transcodeur et/ou entre le transcodeur et le récepteur final.Although the present invention has been described in connection with the transmission of a coded signal SQQD between a transmitter 10 and a receiver 12, it is clear that it applies to the case where the transmitter 36 and / or the receiver 12 correspond to transcoders. By way of example, in the case where the receiver 12 corresponds to a transcoder, it comprises an additional coder adapted to code the signal S '^ LT into a coded signal which may, for example, be transmitted again over the transmission network. packet data transmission 14. The coding implemented by the additional coder of the receiver 12 may not be identical to the coding implemented at the transmitter 10. In the case where the transmitter 10 corresponds to a transcoder, it receives a coded signal, coming for example from the network 14, and comprises a decoder adapted to decode the received coded signal to obtain the multimedia signal SJVΠJLT- The coded signal received by the transmitter 10 may have been coded by a coding different from that implemented by the encoder 16 of the transmitter 10. As a result, it is possible to obtain a structure comprising an initial transmitter, a transcoder and a final receiver connected to a packet data transmission network. Measurement the quality of perception by a previously described user can then be implemented between the initial transmitter and the transcoder and / or between the transcoder and the final receiver.
Bien que la présente invention ait été décrite dans le cadre de la transmission d'un signal codé unique entre un émetteur 10 et un récepteur 12, elle peut s'appliquer au cas où l'émetteur 10 transmet au récepteur 12 plusieurs signaux codés ScOD i où i est un entier variant entre 1 et N. Chaque signal codé SQQD i est obtenu par codage d'un signal multimédia SJVPJLT i correspondant. Les signaux SJVPJLT i peuvent être liés par leur contenu informationnel. A titre d'exemple, il s'agit de signaux vidéo fournis par des caméras filmant une même scène sous des angles de vue différents ou des signaux audio fournis par des micros enregistrant une même source sonore et placés à des emplacements différents. L'émetteur 10 fournit un signal Sj j_ associé à chaque signal SJVPJLT ±. Le récepteur 12 reçoit alors N signaux codés S'QQD i' chaque signal codé S'QQD i étant associé au signal SQQD i ^e meme indice i .Although the present invention has been described in connection with the transmission of a single coded signal between a transmitter 10 and a receiver 12, it can be applied in the case where the transmitter 10 transmits to the receiver 12 several coded signals ScOD i where i is an integer varying between 1 and N. Each coded signal SQQD i is obtained by encoding a corresponding multimedia signal SJVPJLT i. The signals SJVPJLT i can be linked by their informational content. For example, it is video signals provided by cameras filming the same scene from different angles of view or audio signals provided by microphones recording the same sound source and placed at different locations. The transmitter 10 provides a signal S j j_ associated with each signal SJVPJLT ±. The receiver 12 then receives N coded signals S'QQD i 'each coded signal S'QQD i being associated with the signal SQQD i ^ ee same index i.
Le récepteur 12 peut recevoir par ailleurs les N signaux S^ j_. Le récepteur 12 peut fournir un signal S 1^ j_ pour chaque signal codé S'QQD i comme cela a été précédemment décrit. En comparant les signaux S ' ^ i et Sf ^, le décodeur 12 peut déterminer la qualité de la transmission dégradée par les perturbations de transmission du réseau 14 et, en fonction de la qualité déterminée, améliorer la précision de caractéristiques statistiques utilisées lors du décodage et, par exemple, sélectionner le meilleur estimé du signal d'origine avant son encodage. A titre de variante, le décodeur 18 du récepteur 12 peut être adapté à traiter au moins en partie simultanément l'ensemble ou une partie des signaux codés S'QQD i ou à utiliser des caractéristiques, par exemple des caractéristiques statistiques, déterminées lors du décodage d'un signal codé S'cθD,i P°ur Ie décodage d'un autre signal codé S'QQD, i' °ù J est différent de i. Dans ce cas, le récepteur 12 peut fournir un signal S ' j unique représentatif de l'ensemble des opérations de décodage ou d'opérations de simulation de décodage appliquées à l'ensemble ou la partie des signaux codés S'QQD i- Le signal unique S 'j, peut être obtenu à partir des signaux S'j j_ précédemment décrits. De façon analogue, l'émetteur 10 peut fournir un signal Sj unique représentatif de l'ensemble des opérations de décodage ou des opérations de simulation de décodage appliquées à l'ensemble ou la partie des signaux codés SQQD i- Le signal unique S^ peut être obtenu à partir des signaux Sj j_ précédemment décrits. A partir de la comparaison des signaux Sj et S 'j, le décodeur 12 peut alors déterminer la qualité de la transmission dégradée par les perturbations de transmission du réseau 14 et, en fonction de la qualité déterminée, améliorer la précision des caractéristiques statistiques utilisées lors du décodage et, par exemple, sélectionner le meilleur estimé du signal d'origine avant son encodage .The receiver 12 can also receive the N signals S ^ j_. The receiver 12 can provide a signal S 1 for each coded signal S'QQD i as previously described. By comparing the signals S '^ i and Sf ^, the decoder 12 can determine the quality of the transmission degraded by the transmission disturbances of the network 14 and, depending on the quality determined, improve the accuracy of statistical characteristics used during decoding. and, for example, selecting the best estimate of the original signal before it is encoded. As a variant, the decoder 18 of the receiver 12 may be adapted to process all or part of the S'QQD i coded signals at least in part at the same time or to use characteristics, for example statistical characteristics, determined during decoding. an encoded signal S'cθD, i e I P ° ur decode another encoded signal S'QQD, i '° u j is different from i. In this case, the receiver 12 can provide a signal S ' j unique representative of all the operations of decoding or decoding simulation operations applied to all or part of the coded signals. The unique signal S ' j , can be obtained from the signals S' j j_ previously described. Similarly, the transmitter 10 can provide a single signal S j representative of all the decoding operations or decoding simulation operations applied to all or part of the coded signals SQQD i - The single signal S i can be obtained from the signals S j j_ previously described. From the comparison of the signals S j and S ' j , the decoder 12 can then determine the quality of the transmission degraded by the transmission disturbances of the network 14 and, depending on the quality determined, improve the accuracy of the statistical characteristics used. during decoding and, for example, select the best estimate of the original signal before encoding.
A titre d'exemple, la présente invention peut s'appliquer à un transcodeur recevant plusieurs signaux codés S' COD i et fournissant un signal codé unique correspondant au codage des signaux multimédia S'JVJULT i issus des signaux S'QQD i par un codage prédictif temporel. Un tel transcodeur peut fonctionner selon le standard IMS (Internet Multimedia Subsystem) .By way of example, the present invention can be applied to a transcoder receiving a plurality of coded signals S 'COD i and providing a unique coded signal corresponding to the coding of the multimedia signals S'JVJULT i derived from the signals S'QQD i by coding temporal predictive. Such a transcoder can operate according to the IMS (Internet Multimedia Subsystem) standard.
Dans les exemples de réalisation précédemment décrits, les signaux S^ et S ' j sont représentatifs du déroulement du décodage ou d'une simulation de décodage respectivement des signaux SQQD et S'cOD- Toutefois, à titre de variante, le signal S^ peut être représentatif du déroulement du codage du signal S]V[ULT ou d'une simulation du codage du signal SJVJULT et le signal S ' j peut être représentatif du déroulement du codage du signal S' MULT ou d'une simulation du codage du signal S'JVJULT- A titre d'exemple, en figure 1, le décodeur simulé 20 peut être remplacé par un codeur simulé recevant le signal SjypjLT et fournissant le signal S^ et le décodeur simulé 22 peut être remplacé par un codeur simulé recevant le signal S'JVJULT et fournissant le signal S' j, la fourniture et le traitement des signaux Sj et S ' j étant réalisés selon les principes précédemment décrits. A titre de variante, au niveau de l'émetteur 10, au lieu d'utiliser un codeur simulé, le signal S^ peut être directement fourni à partir de l'analyse du déroulement du codage réalisé par le codeur 16. A titre de variante, au niveau du récepteur 12, au lieu d'utiliser un codeur simulé, le signal S'j peut être directement fourni à partir de l'analyse du déroulement du codage réalisé par un codeur identique au codeur 16 et recevant le signal S 'jypjLT-Dans les exemples de réalisation précédemment décrits, les signaux multimédia peuvent ne pas être des signaux multimédia directement exploitables par des dispositifs de lecture classiques et peuvent correspondre à des signaux codés qui requièrent un décodage supplémentaire pour être utilisés par des dispositifs de lecture classiques.In the embodiments described above, the signals S ^ and S j are representative of the flow of decoding of the decoding or simulation respectively SQQD and S'cOD- signals However, alternatively, the signal S ^ can to be representative of the progress of the coding of the signal S] V [ULT or of a simulation of the coding of the signal SJVJULT and the signal S ' j may be representative of the progress of the coding of the signal S' MULT or of a simulation of the coding of the signal As an example, in FIG. 1, the simulated decoder 20 can be replaced by a simulated encoder receiving the signal SjypjLT and supplying the signal S ^ and the simulated decoder 22 can be replaced by a simulated encoder receiving the signal S'JVJULT and providing the signal S ' j , the supply and processing of signals S j and S' j being made according to the principles described above. As a variant, at the level of the transmitter 10, instead of using a simulated encoder, the signal S 1 can be directly supplied from the analysis of the progress of the coding carried out by the encoder 16. As a variant at the receiver 12, instead of using a simulated encoder, the signal S ' j can be directly supplied from the analysis of the coding sequence carried out by an encoder identical to the encoder 16 and receiving the signal S' j yp j LT-in the embodiments described above, the multimedia signals may not be multimedia signals directly readable by conventional playback devices and may correspond to encoded signals that require additional decoding for use by the playback devices classics.
Bien entendu, la présente invention est susceptible de diverses variantes et modifications qui apparaîtront à l'homme de l'art. Selon le traitement prévu pour l'obtention du signal Sj à partir des signaux tempo-j_(t), le module de comparaison 24 peut être adapté à déterminer à nouveau les signaux tempo-j_(t) à partir du signal Sj. Dans ce cas, le décodeur simulé 22 fournit directement les signaux tempo' -j_(t) et le module de comparaison 24 compare les signaux tempo '-j_(t) aux signaux tempo-j_(t). Of course, the present invention is susceptible of various variations and modifications which will be apparent to those skilled in the art. According to the processing provided for obtaining the signal S j from the signals tempo-j (t), the comparison module 24 can be adapted to re-determine the signals tempo-j (t) from the signal S j . In this case, the simulated decoder 22 directly supplies the tempo signals -j_ (t) and the comparison module 24 compares the tempo signals -j_ (t) to the tempo-j_ (t) signals.

Claims

REVENDICATIONS
1. Procédé de mesure de la qualité de perception par un utilisateur d'un signal multimédia final (S'jyπjLT1) fourni par un récepteur (12), ledit signal multimédia final étant obtenu par un décodage d'un premier signal codé (S'QQD) reçu par le récepteur depuis un réseau de transmission de données par paquets (14), le premier signal codé correspondant à un second signal codé (SQQD) fourni au réseau par un émetteur (10) et obtenu par codage d'un signal multimédia initial (SjyπjLT1)' ^e procédé comprenant les étapes suivantes : amener le récepteur à fournir un premier signal de suivi (S 1^) représentatif du déroulement d'une opération parmi le groupe comprenant le décodage appliqué au premier signal codé, une simulation du décodage appliquée au premier signal codé, le codage appliqué au signal multimédia final ou une simulation du codage appliquée au signal multimédia final ; amener l'émetteur à fournir un second signal de suivi (S^) représentatif du déroulement d'une opération parmi le groupe comprenant le décodage appliqué au second signal codé, la simulation du décodage appliquée au second signal codé, le codage appliqué au signal multimédia initial ou la simulation du codage appliquée au signal multimédia initial ; et comparer les premier et second signaux de suivi pour fournir la mesure de la qualité de perception.A method for measuring the quality of a user's perception of a final multimedia signal (S'jyπjLT 1 ) provided by a receiver (12), said final multimedia signal being obtained by decoding a first coded signal (S 'QQD) received by the receiver from a packet data network (14), the first coded signal corresponding to a second coded signal (SQQD) supplied to the network by a transmitter (10) and obtained by encoding a signal initial multimedia method (SjyπjLT 1 )' e method comprising the steps of: causing the receiver to provide a first tracking signal (S 1 ^) representative of the progress of an operation among the group comprising the decoding applied to the first coded signal, a simulation of the decoding applied to the first coded signal, the coding applied to the final multimedia signal or a simulation of the coding applied to the final multimedia signal; causing the transmitter to provide a second tracking signal (S ^) representative of the progress of an operation among the group comprising the decoding applied to the second coded signal, the simulation of the decoding applied to the second coded signal, the coding applied to the multimedia signal initial or simulation of the coding applied to the initial multimedia signal; and comparing the first and second tracking signals to provide the measure of perception quality.
2. Procédé selon la revendication 1, dans lequel le décodage consiste en l'application de fonctions élémentaires (Fonction^ à Fonction5) , le premier signal de suivi (S '^) étant représentatif des instants de début d'application des fonctions élémentaires au premier signal codé (S'QQD) et ^e second signal de suivi (S^) étant représentatif des instants de début d'application des fonctions élémentaires au second signal codé2. Method according to claim 1, in which the decoding consists of the application of elementary functions (Function ^ to Function5), the first tracking signal (S '^) being representative of the instants of beginning of application of the elementary functions to first coded signal (S'QQD) ^ e and second tracking signal (S ^) being representative of the start times of application of the basic functions to the second encoded signal
(SCOD) • (S COD ) •
3. Procédé selon la revendication 2, dans lequel la fourniture du second signal de suivi (S^) comprend les étapes suivantes : (a) mémoriser au niveau de l'émetteur (10) des durées (T]_ à T5) d'application des fonctions élémentaires (Fonction^ à Fonction5) ;The method of claim 2, wherein providing the second tracking signal (S1) comprises the following steps: (a) storing at the transmitter (10) durations (T ] _ to T5) of application of the elementary functions (Function ^ to Function5);
(b) déterminer l'ordre d'application des fonctions élémentaires au second signal codé (SQQD) ' et (b) determining the order of application of the basic functions to the second coded signal (SQQD) ' and
(c) déterminer des signaux de temporisation (tempo-j_ (t) ) représentatifs des instants de début d'application des fonctions élémentaires au second signal codé à partir de l ' ordre d'application des fonctions élémentaires et des durées mémorisées .(c) determining timing signals (tempo-j (t)) representative of the start times of application of the elementary functions to the second coded signal from the order of application of the elementary functions and the stored durations.
4. Procédé selon la revendication 3, dans lequel l'étape (c) est suivie d'une étape consistant à appliquer un traitement aux signaux de temporisation (tempo-j_ (t) ) pour fournir le second signal de suivi (S^) ayant une taille réduite.The method of claim 3 wherein step (c) is followed by a step of applying a process to the timing signals (tempo-j (t)) to provide the second tracking signal (S ^). having a reduced size.
5. Procédé selon la revendication 2, dans lequel la fourniture du premier signal de suivi (S '^) comprend les étapes suivantes :The method of claim 2, wherein the provision of the first tracking signal (S ') comprises the following steps:
(a) mémoriser au niveau du récepteur (12) des durées (T]_ à T5) d'application des fonctions élémentaires (Fonction^ à Fonction5) ;(a) storing at the receiver (12) durations (T ] _ to T5) of application of the elementary functions (Function ^ to Function5);
(b) déterminer l'ordre d'application des fonctions élémentaires au premier signal codé (S'QQD) ' et (b) determining the order of application of the elementary functions to the first coded signal (S'QQD) ' and
(c) déterminer des signaux de temporisation (tempo ' j_ (t) ) représentatifs des instants de début d'application des fonctions élémentaires au premier signal codé à partir de l'ordre d'application des fonctions élémentaires et de durées parmi les durées (T]_ à T5) mémorisées.(c) determining timing signals (tempo 'j_ (t)) representative of the start times of application of the elementary functions to the first coded signal from the order of application of the elementary functions and durations among the durations ( T] _ to T5) stored.
6. Procédé selon la revendication 1, dans lequel le second signal de suivi (S^) est transmis au récepteur (12) par l'intermédiaire du réseau (14) parallèlement au second signal codé (SCOD) •The method according to claim 1, wherein the second tracking signal (S ^) is transmitted to the receiver (12) via the network (14) in parallel with the second coded signal (S CO D).
7. Dispositif non intrusif de mesure de la qualité de perception par un utilisateur d'un signal multimédia final7. Non-intrusive device for measuring the quality of perception by a user of a final multimedia signal
(S'MULT) fourni par un récepteur (12), ledit signal multimédia final étant obtenu par un décodage d'un premier signal codé (S 'COD) reçu par le récepteur depuis un réseau de transmission de données par paquets (14), le premier signal codé correspondant à un second signal codé (SQQD) fourni au réseau par un émetteur (10) et obtenu par codage d'un signal multimédia initial (SjyπjLT1)' ^e dispositif étant caractérisé en ce qu'il comprend : un moyen (18, 22) disposé au niveau du récepteur et adapté à fournir un premier signal de suivi (S '^) représentatif du déroulement d'une opération parmi le groupe comprenant le décodage appliqué au premier signal codé, une simulation du décodage appliquée au premier signal codé, le codage appliqué au signal multimédia final ou une simulation du codage appliquée au signal multimédia final ; un moyen (20 ; 34) disposé au niveau de l'émetteur et adapté à fournir un second signal de suivi (S^) représentatif du déroulement d'une opération parmi le groupe comprenant le décodage appliqué au second signal codé, la simulation du décodage appliquée au second signal codé, le codage appliqué au signal multimédia initial ou la simulation du codage appliquée au signal multimédia initial ; et un moyen de comparaison (24) des premier et second signaux de suivi et de fourniture de la mesure de la qualité de perception.(S'MULT) provided by a receiver (12), said final multimedia signal being obtained by decoding a first coded signal (S 'COD) received by the receiver from a packet data network (14), the first coded signal corresponding to a second coded signal (SQQD) supplied to the network by a transmitter (10) and obtained by coding an initial multimedia signal (SjyπjLT 1 ) '^ e device being characterized in that it comprises: means (18, 22) disposed at the receiver and adapted to provide a first tracking signal (S' ^) representative of the unfolding an operation among the group comprising the decoding applied to the first coded signal, a simulation of the decoding applied to the first coded signal, the coding applied to the final multimedia signal or a simulation of the coding applied to the final multimedia signal; means (20; 34) disposed at the transmitter and adapted to provide a second tracking signal (S ^) representative of the progress of an operation among the group comprising the decoding applied to the second coded signal, the simulation of the decoding applied to the second coded signal, the coding applied to the initial multimedia signal or the simulation of the coding applied to the initial multimedia signal; and means for comparing (24) the first and second signals for monitoring and providing the perception quality measurement.
8. Dispositif selon la revendication 7, dans lequel le décodage consiste en l'application de fonctions élémentaires (Fonction^ à Fonction5) , le moyen (20 ; 34) adapté à fournir le second signal de suivi (S^) étant en outre adapté à déterminer l'ordre d'application des fonctions élémentaires au second signal codé (SQQD) et à déterminer des signaux de temporisation (tempos (t) ) représentatifs des instants de début d'application des fonctions élémentaires au second signal codé à partir de l'ordre d'application des fonctions élémentaires et de durées (T]_ à T5) mémorisées d'application des fonctions élémentaires.8. Device according to claim 7, in which the decoding consists of the application of elementary functions (Function ^ to Function5), the means (20; 34) adapted to provide the second tracking signal (S ^) being further adapted determining the order of application of the basic functions to the second coded signal (SQQD) and determining timing signals (tempos (t)) representative of the start times of application of the elementary functions to the second signal coded from the order of application of the elementary functions and durations (T ] _ to T5) stored in application of the elementary functions.
9. Dispositif selon la revendication 8, dans lequel les durées (T]_ à T5) mémorisée dépendent du récepteur (12) . 9. Device according to claim 8, wherein the durations (T ] _ to T5) stored depend on the receiver (12).
10. Dispositif selon la revendication 7, dans lequel le décodage consiste en l'application de fonctions élémentaires, le moyen (18, 22) adapté à fournir le premier signal de suivi (S 1^) étant en outre adapté à déterminer l'ordre d'application des fonctions élémentaires au premier signal codé (S'QQD) et à déterminer des signaux de temporisation (tempo ' j_ (t) ) représentatifs des instants de début d'application des fonctions élémentaires au premier signal codé à partir de l ' ordre d'application des fonctions élémentaires et de durées (T]_ à T5) mémorisées d'application des fonctions élémentaires.10. Device according to claim 7, wherein the decoding consists of the application of elementary functions, the means (18, 22) adapted to provide the first tracking signal (S 1 ^) being further adapted to determine the order applying the basic functions to the first coded signal (S'QQD) and determining timing signals (tempo 'j_ (t)) representative of the start times of application of the elementary functions to the first signal coded from the order of application of the elementary functions and durations (T ] _ to T5) stored in application of the elementary functions.
11. Dispositif selon la revendication 7, dans lequel le moyen de comparaison (24) est disposé au niveau du récepteur11. Device according to claim 7, wherein the comparison means (24) is arranged at the receiver
(12), l'émetteur (10) étant en outre adapté à transmettre au récepteur (12) le second signal de suivi (S^) par l'intermédiaire du réseau (14) parallèlement au second signal codé (SC0D) .(12), the transmitter (10) being further adapted to transmit to the receiver (12) the second tracking signal (S ^) through the network (14) parallel to the second coded signal (S C0D ).
12. Dispositif selon la revendication 9, comprenant au moins un récepteur supplémentaire fournissant le signal multimédia final par décodage du premier signal codé reçu par le récepteur supplémentaire depuis le réseau de transmission de données par paquets, l'émetteur comprenant un moyen de détermination de signaux de temporisation supplémentaires représentatifs des instants de début d'application des fonctions élémentaires au second signal codé à partir de l ' ordre d'application des fonctions élémentaires et de durées mémorisées d'application des fonctions élémentaires qui dépendent du récepteur supplémentaire .The device according to claim 9, comprising at least one additional receiver providing the final multimedia signal by decoding the first coded signal received by the additional receiver from the packet data network, the transmitter comprising signal determining means. additional delaying means representative of the start times of application of the elementary functions to the second coded signal from the order of application of the elementary functions and stored durations of application of the elementary functions which depend on the additional receiver.
13. Dispositif selon la revendication 7, dans lequel le récepteur (12) comprend un moyen de fourniture d'un premier signal d'horloge destiné à la synchronisation du fonctionnement du récepteur et dans lequel l'émetteur (10) comprend un moyen de fourniture d'un second signal d'horloge destiné à la synchronisation du fonctionnement de l'émetteur, le premier signal d'horloge et le second signal d'horloge n'étant pas synchrones. The device of claim 7, wherein the receiver (12) comprises means for providing a first clock signal for synchronizing the operation of the receiver and wherein the transmitter (10) comprises a means for providing a second clock signal for synchronizing the operation of the transmitter, the first clock signal and the second clock signal are not synchronous.
14. Dispositif selon la revendication 7, dans lequel le moyen (24) de fourniture de la mesure de la qualité de perception fournit un signal (Q) de mesure de la qualité de perception au moins partiellement identique au signal de mesure de la qualité de perception obtenu par un procédé objectif ou subjectif de mesure standardisé.Device according to claim 7, wherein the means (24) for providing the perception quality measurement provides a signal (Q) for measuring the perception quality at least partially identical to the signal for measuring the quality of perception. perception obtained by an objective or subjective method of standardized measurement.
15. Dispositif selon la revendication 7, dans lequel le récepteur (12) est adapté à fournir un troisième signal codé à partir du signal multimédia final (S'jyπjLT1) et à transmettre le troisième signal codé sur le réseau de transmission de données par paquets (14) et/ou dans lequel l'émetteur est adapté à recevoir, depuis le réseau de transmission de données par paquets, un quatrième signal codé et à fournir le signal multimédia initial (SJVPJLT) à partir du quatrième signal codé.15. Device according to claim 7, wherein the receiver (12) is adapted to provide a third signal coded from the final multimedia signal (S'jyπjLT 1 ) and to transmit the third signal encoded on the data transmission network by packets (14) and / or wherein the transmitter is adapted to receive, from the packet data network, a fourth coded signal and to provide the initial multimedia signal (SJVPJLT) from the fourth coded signal.
16. Dispositif selon la revendication 7, dans lequel le récepteur (12) est adapté à fournir un signal multimédia final supplémentaire obtenu par le décodage d'un troisième signal codé reçu par le récepteur depuis le réseau de transmission de données par paquets (14), le troisième signal codé correspondant à un quatrième signal codé fourni au réseau par l'émetteur (10) et obtenu par codage d'un signal multimédia initial supplémentaire, le dispositif comprenant un moyen disposé au niveau du récepteur et adapté à fournir un troisième signal de suivi représentatif du déroulement d'une opération parmi le groupe comprenant le décodage appliqué au troisième signal codé, une simulation du décodage appliquée au troisième signal codé, le codage appliqué au signal multimédia final supplémentaire ou une simulation du codage appliquée au signal multimédia final supplémentaire ; et un moyen disposé au niveau de l'émetteur et adapté à fournir un quatrième signal de suivi représentatif du déroulement d'une opération parmi le groupe comprenant le décodage appliqué au quatrième signal codé, la simulation du décodage appliquée au quatrième signal codé, le codage appliqué au signal multimédia initial supplémentaire ou la simulation du codage appliquée au signal multimédia initial supplémentaire. Device according to claim 7, wherein the receiver (12) is adapted to provide an additional final multimedia signal obtained by the decoding of a third coded signal received by the receiver from the packet data network (14). the third coded signal corresponding to a fourth coded signal supplied to the network by the transmitter (10) and obtained by coding an additional initial multimedia signal, the device comprising means arranged at the receiver and adapted to provide a third signal tracking representative of the progress of an operation among the group comprising the decoding applied to the third coded signal, a simulation of the decoding applied to the third coded signal, the coding applied to the additional final multimedia signal or a simulation of the coding applied to the additional final multimedia signal ; and means disposed at the transmitter and adapted to provide a fourth tracking signal representative of the progress of an operation from the group comprising the decoding applied to the fourth coded signal, the simulation of the decoding applied to the fourth coded signal, the coding applied to the additional initial multimedia signal or the simulation of the coding applied to the additional initial multimedia signal.
17. Dispositif selon la revendication 16, dans lequel l'émetteur (10) est adapté à déterminer un cinquième signal de suivi à partir des deuxième et quatrième signaux de suivi et à transmettre le cinquième signal de suivi au récepteur (12) par l'intermédiaire du réseau (14) parallèlement aux deuxième et quatrième signaux codés. The device of claim 16, wherein the transmitter (10) is adapted to determine a fifth tracking signal from the second and fourth tracking signals and to transmit the fifth tracking signal to the receiver (12) by the intermediate of the network (14) parallel to the second and fourth coded signals.
PCT/FR2006/051000 2005-10-07 2006-10-06 Measuring the quality of perception by a user of a multimedia signal transmitted over a packet data transmission network WO2007042719A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR0553048 2005-10-07
FR0553048A FR2891969B1 (en) 2005-10-07 2005-10-07 MEASURING THE QUALITY OF USER PERCEPTION OF A MULTIMEDIA SIGNAL TRANSMITTED ON A PACKET DATA TRANSMISSION NETWORK

Publications (1)

Publication Number Publication Date
WO2007042719A1 true WO2007042719A1 (en) 2007-04-19

Family

ID=36602510

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/FR2006/051000 WO2007042719A1 (en) 2005-10-07 2006-10-06 Measuring the quality of perception by a user of a multimedia signal transmitted over a packet data transmission network

Country Status (2)

Country Link
FR (1) FR2891969B1 (en)
WO (1) WO2007042719A1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5446492A (en) * 1993-01-19 1995-08-29 Wolf; Stephen Perception-based video quality measurement system
EP0986269A2 (en) * 1998-09-08 2000-03-15 Tektronix, Inc. In-service realtime picture quality analysis
US20020181408A1 (en) * 2001-05-30 2002-12-05 Sudheer Sirivara Delivery of streaming media

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5446492A (en) * 1993-01-19 1995-08-29 Wolf; Stephen Perception-based video quality measurement system
EP0986269A2 (en) * 1998-09-08 2000-03-15 Tektronix, Inc. In-service realtime picture quality analysis
US20020181408A1 (en) * 2001-05-30 2002-12-05 Sudheer Sirivara Delivery of streaming media

Also Published As

Publication number Publication date
FR2891969B1 (en) 2008-01-04
FR2891969A1 (en) 2007-04-13

Similar Documents

Publication Publication Date Title
EP0768770B1 (en) Method and arrangement for the creation of comfort noise in a digital transmission system
AU2008202703B2 (en) Apparatus and method for providing multimedia content
FR2835125A1 (en) METHOD FOR EVALUATING A DIGITAL AUDIO SIGNAL
FR3076158A1 (en) FLOW CONTROL METHOD
Mäki et al. A layered model for quality estimation of HTTP video from QoS measurements
CA2377808C (en) Method for evaluating the quality of audio-visual sequences
EP2368367B1 (en) Interactive system and method for transmitting key images selected from a video stream over a low bandwidth network
FR2893470A1 (en) METHOD AND DEVICE FOR CREATING A VIDEO SEQUENCE REPRESENTATIVE OF A DIGITAL VIDEO SEQUENCE AND METHODS AND DEVICES FOR TRANSMITTING AND RECEIVING VIDEO DATA THEREOF
FR3011426A1 (en) METHOD AND DEVICE FOR TRANSMITTING AT LEAST ONE PART OF A SIGNAL DURING A VISIOCONFERENCE SESSION
WO2007042719A1 (en) Measuring the quality of perception by a user of a multimedia signal transmitted over a packet data transmission network
WO2006103327A1 (en) Method and device for evaluating degradation of quality caused by an invariance of a stimulus, as perceived by a recipient of said stimulus
WO2016113364A1 (en) Method for transmitting a data flow using a direct broadcasting protocol
CN105959798B (en) The frame alignment method, apparatus and equipment of video flowing
WO2006103323A1 (en) Method and device for evaluating a quality of signal representing at least one stimulus, as perceived by a recipient of said stimulus
FR2949894A1 (en) Individual's e.g. moderator, courtesy determining method for e.g. broadcasting audio programs in radio, involves measuring time information of individual during discussion, and determining courtesy of individual from measured information
EP2064855B1 (en) Method of communicating between several terminals
EP3582500B1 (en) Method, system and computer program for analysing the complexity of multimedia content for on-demand broadcast
EP3718301B1 (en) Video conference communication
FR3111497A1 (en) A method of managing the reproduction of multimedia content on reproduction devices.
EP0800747A1 (en) Digital video programme multiplexing device
EP4356606A1 (en) Methods and devices for decoding at least part of a data stream, computer program and associated data streams
WO2023052703A1 (en) Method for managing the rendering of an item of audio content
WO2020188097A1 (en) Method for restoring customisation content of a main radio stream
WO2021123563A1 (en) Multimedia content analysis
FR2795276A1 (en) Estimation method for relationship between control parameters in digital data compression system, involves estimating adaptive filter parameters in parametric model and providing compensation

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application
NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 06820262

Country of ref document: EP

Kind code of ref document: A1