FR3020541A1 - Procede et dispositif de traitement de signaux multimedia, terminal, programme d'ordinateur et support de stockage correspondants. - Google Patents

Procede et dispositif de traitement de signaux multimedia, terminal, programme d'ordinateur et support de stockage correspondants. Download PDF

Info

Publication number
FR3020541A1
FR3020541A1 FR1453782A FR1453782A FR3020541A1 FR 3020541 A1 FR3020541 A1 FR 3020541A1 FR 1453782 A FR1453782 A FR 1453782A FR 1453782 A FR1453782 A FR 1453782A FR 3020541 A1 FR3020541 A1 FR 3020541A1
Authority
FR
France
Prior art keywords
multimedia signals
multimedia
signal
quality
signals
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
FR1453782A
Other languages
English (en)
Inventor
Ayoubi Salah Eddine El
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orange SA
Original Assignee
Orange SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Orange SA filed Critical Orange SA
Priority to FR1453782A priority Critical patent/FR3020541A1/fr
Publication of FR3020541A1 publication Critical patent/FR3020541A1/fr
Withdrawn legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44209—Monitoring of downstream path of the transmission network originating from a server, e.g. bandwidth variations of a wireless network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

L'invention concerne un procédé de traitement de signaux multimédia sur un terminal mobile, comprenant : - une étape de réception d'au moins deux signaux multimédia respectifs diffusés en temps réel, portant des données représentatives d'une même séquence source codée en utilisant des techniques de codage respectives distinctes, - une étape d'analyse d'au moins une image et/ou d'au moins un son des signaux multimédia, de façon à déterminer un niveau de qualité associé à chacun des signaux multimédia, et - une étape de classement des techniques de codage associées aux signaux multimédia, en fonction des niveaux de qualité.

Description

Procédé et dispositif de traitement de signaux multimédia, terminal, programme d'ordinateur et support de stockage correspondants. 1. Domaine de l'invention Le domaine de l'invention est celui des télécommunications, et plus particulièrement celui de la réception de signaux multimédia sur des terminaux mobiles, par exemple de type téléphone intelligent (en anglais « smartphone ») ou tablette. Plus précisément, l'invention propose une technique de traitement des signaux multimédia reçus, tenant compte de leur qualité au niveau de la réception. L'invention trouve notamment des applications dans le domaine de la télévision ou de la radio sur terminal mobile. 2. Art antérieur Les opérateurs de télécommunications offrent aujourd'hui de nombreux services, et notamment des services de diffusion de signaux vidéo ou audio. De tels services permettent aux utilisateurs de terminaux mobiles de visionner en temps réel un programme télévisuel ou d'écouter la radio. Pour ce faire, un signal vidéo ou audio, encore appelé signal multimédia, peut être diffusé dans un réseau de diffusion, en respectant une norme de diffusion. Par exemple, un signal vidéo peut être diffusé dans un réseau selon une norme DVB (« Digital Video Broadcasting ») ou dans un réseau selon une norme 3GPP (3G, LTE « Long Term Evolution », etc). De la même façon, un signal audio peut être diffusé dans un réseau selon une norme DAB (« Digital Audio Broadcasting ») ou dans un réseau selon une norme 3GPP (3G, LTE « Long Term Evolution », etc). Chaque norme définit une ou plusieurs techniques de codage. Par exemple, la norme DVB (« Digital Video Broadcast ») propose différentes techniques de codage spécifiques aux mobiles (DVB-H pour « DVB Handheld », et DVB-NGH pour « DVB Next Generation Handheld »). Les normes 3GPP proposent les techniques de codage MBMS ou eMBMS (en anglais « (evolved) Multicast Broadcast Multimedia Service », en français « service de diffusion multimédia générale/multipoints avancée).
Plusieurs versions d'un même contenu source (séquence audio ou vidéo par exemple) peuvent être diffusées simultanément dans un réseau de diffusion, chaque version résultant de l'utilisation de l'une des techniques de codage pour coder le contenu source. Il est ainsi prévu une possibilité de coopération entre les couvertures DVB et LTE (par exemple, d'une part, un signal à définition-standard, noté SD, et un signal à haute-définition, noté HD, via DVB, et d'autre part un signal HD via LTE), dans des réseaux hybrides. Les zones de couverture d'un émetteur selon la norme LTE et d'un émetteur selon la norme DVB peuvent donc se superposer, et un même service peut être transmis aux terminaux présents dans ces zones indifféremment selon l'une ou l'autre de ces normes. En particulier, ce même service peut simultanément être diffusé dans un premier signal multimédia par un émetteur selon la norme LTE, et dans un deuxième signal multimédia par un émetteur selon la norme DVB. A réception, le terminal peut choisir de décoder le premier signal multimédia, ou bien le deuxième signal multimédia, par exemple en tenant compte la puissance des signaux pilotes transmis avec chacun des signaux multimédia. Ainsi, si la puissance du signal pilote transmis avec le premier signal multimédia est supérieure à la puissance du signal pilote transmis avec le deuxième signal multimédia, le terminal décodera uniquement le premier signal multimédia. Si on se place dans le contexte d'un réseau diffusant un même service en SD et en HD selon une même norme, le terminal décodera systématiquement le signal HD. 3. Exposé de l'invention L'invention propose une solution nouvelle pour le traitement des signaux multimédia reçus sur un terminal mobile. Plus précisément, l'invention propose un procédé de traitement comprenant : une étape de réception d'au moins deux signaux multimédia respectifs diffusés en temps réel, portant des données représentatives d'une même séquence source codée en utilisant des techniques de codage respectives distinctes, une étape d'analyse d'au moins une image et/ou d'au moins un son des signaux multimédia, de façon à déterminer un niveau de qualité associé à chacun des signaux multimédia, une étape de classement des techniques de codage associées aux signaux multimédia, en fonction des niveaux de qualité.
On se place ici dans le contexte de la diffusion simultanée de plusieurs signaux multimédia portant chacun un même contenu source, codé en utilisant pour chaque signal multimédia une technique de codage différente. Une telle technique de codage peut être définie dans la norme de diffusion mise en oeuvre (LTE, DVB, etc.). Par exemple, on considère que le codage d'une vidéo source en signal vidéo à définition standard SD selon la norme DVB, le codage d'une vidéo source en signal vidéo à haute définition HD selon la norme DVB, le codage d'une vidéo source en signal vidéo à haute définition HD selon la norme LTE, correspondent à trois techniques de codage distinctes. Selon l'invention, on classe les signaux multimédia reçus, ou les techniques de codage utilisées pour construire ces signaux multimédia, en tenant compte de la qualité des signaux multimédia reçus. Pour ce faire, on décode chacun des signaux multimédia reçus et on analyse le contenu de ces signaux (i.e. au moins une image et/ou un son de chacun des signaux multimédia) pour déterminer un niveau de qualité associé à chacun des signaux multimédia. De cette façon, on dispose au niveau du terminal d'une information sur la qualité des signaux multimédia reçus, après décodage. On peut alors comparer, au sein du terminal, les différents niveaux de qualité pour les signaux multimédia portant une même séquence source codée en utilisant des techniques de codage distinctes, pour par exemple sélectionner la technique de codage associée au signal multimédia présentant le niveau de qualité le plus élevé. On note que ces différentes étapes peuvent être mises en oeuvre « hors-ligne », i.e. lorsque l'utilisateur ne sollicite pas l'accès à un service de type télévision ou radio sur mobile.
Lorsque l'utilisateur sollicitera un accès à ce type de service, le terminal pourra, par exemple, sélectionner la technique de codage la mieux adaptée pour recevoir ce service, en tenant compte du classement des techniques de codage en fonction du niveau de qualité. Selon une caractéristique particulière de l'invention, les étapes d'analyse et de classement sont mises en oeuvre périodiquement et/ou lorsqu'une variation d'un canal de transmission des signaux multimédia est détectée. De cette façon, le terminal actualise les informations relatives aux niveaux de qualité, de façon à disposer d'un classement des techniques de codage « à jour » que le terminal pourra utiliser, par exemple pour sélectionner la technique de codage la mieux adaptée. En particulier, ces étapes peuvent être mises en oeuvre suite à un déplacement géographique de l'utilisateur. Selon un aspect particulier de l'invention, le procédé de traitement comprend une étape de sélection d'une des techniques de codage en fonction du niveau de qualité associé au signal multimédia correspondant et/ou d'au moins une préférence d'un utilisateur du terminal. Ainsi, on sélectionne par exemple la technique de codage associée au signal multimédia présentant le niveau de qualité le plus élevé. En variante, on sélectionne la technique de codage en tenant compte des préférences de l'utilisateur. Par exemple, on sélectionne une technique de codage associée à un signal multimédia présentant un niveau de qualité inférieur au niveau de qualité le plus élevé, mais nécessitant moins de ressources (par exemple en termes de volume de données, débit, bande passante, ...).
Une séquence codée en utilisant la technique de codage sélectionnée peut ensuite être restituée sur le terminal mobile. On note qu'une telle séquence peut être la séquence source ou bien une autre séquence, codée en utilisant la technique de codage sélectionnée. En effet, comme indiqué ci-dessus, ces différentes étapes peuvent être mises en oeuvre « hors-ligne », de sorte à fournir à l'utilisateur un classement des techniques de codage qu'il pourra utiliser pour choisir la technique de codage la mieux adaptée lorsqu'il se connectera à un tel service de radio/vidéo sur terminal. On tire ainsi avantage du fait que les signaux multimédia de type radio ou vidéo sont diffusés en continu, indépendamment du fait que l'utilisateur du terminal mobile sélectionne l'application télévision/radio mobile ou non.
En variante, ces différentes étapes peuvent être mises en oeuvre en temps réel, de façon à adapter automatiquement la technique de codage au service en cours de lecture. Selon un mode de réalisation particulier, le procédé de traitement comprend une étape de mémorisation d'au moins un des niveaux de qualité associés aux signaux multimédia, ou de la technique de codage correspondante, et d'un instant de détermination des niveaux de qualité et/ou d'une position géographique du terminal mobile correspondante. Il est ainsi possible de construire une table ou une carte « de qualité », permettant de suivre l'évolution de la qualité de réception (et donc des techniques de codage apportant ces niveaux de qualité) dans le temps et/ou dans l'espace. Dans ce cas, le procédé de traitement met également en oeuvre une étape de localisation du terminal mobile, par exemple à l'aide d'un GPS. En particulier, un tel procédé met en oeuvre une étape de lissage temporel, affectant un poids aux niveaux de qualité mémorisés, ou aux techniques de codage correspondantes, en fonction des instants de détermination. Il est ainsi possible de donner plus ou moins de poids à l'historique de qualité. Par exemple, il est possible d'affecter un poids plus faible aux niveaux de qualité obtenus sur une période temporelle plus lointaine, et un poids plus élevé aux niveaux de qualité obtenus sur une période temporelle plus proche. Selon une caractéristique spécifique de l'invention, l'étape d'analyse mesure un niveau de qualité de type « qualité d'expérience » (en anglais « Quality of Experience » ou 00E), permettant de mesurer la qualité du signal multimédia reçu, telle que perçue par l'utilisateur du terminal mobile. L'invention propose ainsi, selon au moins un mode de réalisation, une méthode de test automatique de la qualité d'un signal multimédia reçu, telle que perçue par l'utilisateur du terminal mobile.
En particulier, selon un premier exemple, l'étape d'analyse met en oeuvre les sous-étapes suivantes : prélèvement d'au moins un échantillon de chacun des signaux multimédia reçus, identifiant une même portion de la séquence source ; décodage des échantillons, tenant compte, pour chaque signal multimédia reçu, de la technique de codage utilisée à la diffusion pour obtenir le signal multimédia ; comparaison des échantillons décodés à au moins un échantillon d'un signal de référence identifiant la même portion de la séquence source. Une telle technique permet de comparer une image ou un son dont on veut mesurer la qualité à une image ou un son de référence.
Par exemple, le signal de référence est un signal de définition standard, notée SD. En effet, un tel signal est classiquement transmis en utilisant une modulation plus robuste, et présente donc peu d'erreurs de transmission. Selon un deuxième exemple, l'étape d'analyse met en oeuvre les sous-étapes suivantes : prélèvement d'au moins un échantillon de chacun des signaux multimédia reçus, identifiant une même portion de la séquence source ; extraction d'au moins un descripteur pour chacun des échantillons prélevés, tenant compte, pour chaque signal multimédia, de la technique de codage utilisée à la diffusion pour obtenir le signal multimédia ; comparaison de l'ensemble des descripteurs extraits à au moins un ensemble de descripteurs de référence identifiant la même portion de la séquence source. Une telle technique permet de comparer un descripteur décrivant une image ou un son dont on veut mesurer la qualité à un descripteur de référence décrivant une image ou un son de référence. Dans un autre mode de réalisation, l'invention concerne un dispositif de traitement de signaux multimédia sur un terminal mobile, comprenant : un module de réception d'au moins deux signaux multimédia respectifs diffusés en temps réel, portant des données représentatives d'une même séquence source codée en utilisant des techniques de codage respectives distinctes, un module d'analyse d'au moins une image et/ou d'au moins un son des signaux multimédia, de façon à déterminer un niveau de qualité associé à chacun des signaux multimédia, et un module de classement des techniques de codage associées aux signaux multimédia, en fonction des niveaux de qualité. Un tel dispositif de traitement est notamment adapté à mettre en oeuvre le procédé de traitement décrit précédemment. Ce dispositif pourra bien sûr comporter les différentes caractéristiques relatives au procédé de traitement selon l'invention, qui peuvent être combinées ou prises isolément. Ainsi, les caractéristiques et avantages de ce dispositif sont les mêmes que ceux du procédé de traitement. Par conséquent, ils ne sont pas détaillés plus amplement.
En particulier, un tel dispositif peut être intégré à un terminal de type téléphone, tablette, etc., apte à recevoir des signaux multimédia obtenus en mettant en oeuvre des techniques de codage différentes. Dans encore un autre mode de réalisation, l'invention concerne un ou plusieurs programmes d'ordinateur comportant des instructions pour la mise en oeuvre d'un procédé de traitement tel que décrit ci-dessus, lorsque ce ou ces programmes sont exécutés par un processeur. Dans encore un autre mode de réalisation, l'invention concerne un support d'informations, inamovible, ou partiellement ou totalement amovible, lisible par un ordinateur, et comportant des instructions d'un programme d'ordinateur pour l'exécution des étapes du procédé de traitement tel que décrit ci-dessus. 4. Liste des figures D'autres caractéristiques et avantages de l'invention apparaîtront plus clairement à la lecture de la description suivante d'un mode de réalisation particulier, donné à titre de simple exemple illustratif et non limitatif, et des dessins annexés, parmi lesquels : - la figure 1 présente les principales étapes mises en oeuvre par un procédé de traitement d'au moins deux signaux multimédia selon l'invention ; la figure 2 illustre un exemple de réseau cellulaire mettant en oeuvre au moins une station de base et au moins un terminal ; la figure 3 présente la structure d'un dispositif de traitement mettant en oeuvre une technique de traitement d'au moins deux signaux multimédia selon un mode de réalisation particulier de l'invention. 5. Description d'un mode de réalisation de l'invention Le principe général de l'invention repose sur la détermination des niveaux de qualité d'au moins deux signaux multimédia correspondant à différentes versions d'une même séquence source, de façon à classer ces signaux multimédia en fonction des niveaux de qualité. Plus précisément, chaque version de la séquence source résultant de l'utilisation d'une technique de codage différente, l'invention propose de classer les différentes techniques de codage en fonction des niveaux de qualité. Un tel classement peut être utilisé pour sélectionner la technique de codage la mieux adaptée à l'utilisateur (par exemple celle qui est associée au signal multimédia présentant le niveau de qualité le plus élevé, soit à un instant donné, soit sur une période donnée), ou pour construire une table/fonction permettant de décrire l'évolution de la qualité dans le temps et/ou dans l'espace. On présente, en relation avec la figure 1, les principales étapes mises en oeuvre par le procédé de traitement selon l'invention.
On considère par exemple un réseau de diffusion selon la norme DVB, illustré en figure 2, diffusant simultanément, à partir d'une station de base 21, deux versions d'une même séquence source, par exemple une séquence vidéo. En particulier, un signal vidéo obtenu en utilisant une technique de codage de type DVB- NGH peut utiliser une trame similaire à celle d'un signal vidéo obtenu en utilisant une technique de codage de type DVB T2-light dédiée aux utilisateurs mobiles. L'invention peut ainsi être mise en oeuvre pour la réception d'un signal vidéo obtenu en utilisant une technique de codage de type DVB-NGH et d'un signal vidéo obtenu en utilisant une technique de codage de type DVB-T2. De la même façon, si l'on considère un réseau hybride, l'invention peut ainsi être mise en oeuvre pour la réception d'un signal vidéo obtenu en utilisant une technique de codage de type DVB-T2 (DVB) et d'un signal vidéo obtenu en utilisant une technique de codage de type MBMS (LTE). Au cours d'une première étape 11, le terminal 22, localisé dans la zone de couverture de la station de base 21, reçoit par exemple deux signaux vidéo diffusés en temps réel par la station de base 21, dont un premier signal vidéo à définition standard SD portant des données représentatives de la séquence vidéo source codée en utilisant une technique de codage SD selon la norme DVB, et un deuxième signal vidéo haute définition HD portant des données représentatives de la séquence vidéo source codée en utilisant une technique de codage HD selon la norme DVB.
Au cours d'une étape d'analyse 12, le terminal 22 analyse au moins une image et/ou au moins un son des premier et deuxième signaux vidéo, de façon à déterminer un premier niveau de qualité 01 et un deuxième niveau de qualité 02 associés respectivement au premier et au deuxième signaux vidéo. Pour ce faire, il est nécessaire de décoder au moins partiellement les premier et deuxième signaux vidéo. En particulier, une telle étape permet de mesurer la qualité d'expérience (QoE) ou de service (QoS) des différents signaux vidéo reçus par le terminal 22. Au cours d'une troisième étape 13, les techniques de codage associées aux premier et deuxième signaux vidéo sont classées en fonction des niveaux de qualité. Par exemple, on conclut que le premier signal SD présente un premier niveau de qualité 01 supérieur au deuxième niveau de qualité 02 du deuxième signal HD.
Eventuellement, des informations de datation (instant de détermination des niveaux de qualité) et/ou de géolocalisation (position géographique du terminal) peuvent être associées aux niveaux de qualité, ou aux techniques de codage correspondantes, et mémorisées. Il est ainsi possible d'obtenir de suivre l'évolution de la qualité de réception dans le temps et/ou dans l'espace.
Ce classement des différentes techniques de codage, éventuellement associées à des informations de datation et/ou de géolocalisation, peut être utilisé dans diverses applications. Ainsi, on suppose que le terminal 22 est équipé de plusieurs interfaces radio lui permettant de recevoir une chaîne TV selon plusieurs versions (premier signal SD selon la norme DVB et deuxième signal HD selon la norme DVB selon l'exemple illustré en figure 2, ou bien premier signal HD selon la norme DVB et deuxième signal HD selon la norme LTE si l'on considère un réseau hybride, ou tous autres signaux obtenus en utilisant des techniques de codage distinctes). Selon un premier exemple d'application, les étapes illustrées en figures 1 peuvent être mises en oeuvre au niveau des différentes interfaces radio, de façon à obtenir un classement des différentes techniques de codage, et à sélectionner une technique de codage, par exemple celle offrant le niveau de qualité le plus élevé, ou le meilleur historique de qualité, parmi les techniques de codage disponibles. Ainsi, quand l'utilisateur du terminal 22 invoque l'application TV, le terminal met en oeuvre une étape de sélection de la technique de codage offrant le niveau de qualité le plus élevé (soit à un instant donné, soit sur une période donnée), et peut restituer une séquence vidéo codée en utilisant la technique de codage sélectionnée. On note que ce n'est pas nécessairement la technique de codage offrant le niveau de qualité le plus élevé qui est sélectionnée lors de l'étape de sélection. En effet, il est possible de tenir également compte des préférences de l'utilisateur du terminal. Ainsi, un utilisateur pourra privilégier une technique de codage moins coûteuse en termes de volume de données à transmettre, par exemple lorsqu'il approche de la limite de son forfait de transmission de données. Selon un deuxième exemple d'application, on suppose que le terminal 22 est en outre équipé d'un module lui permettant de se localiser, comme un récepteur GPS. Le terminal 22 peut alors mémoriser les niveaux de qualité associés aux signaux vidéo, ou de la technique de codage correspondante, et un instant de détermination des niveaux de qualité et/ou d'une position géographique du terminal mobile correspondante. Le terminal 22 peut alors combiner ces informations de niveaux de qualité et de datation et/ou de géolocalisation pour construire une table ou une carte géographique et/ou temporelle de qualité TV pour les différentes techniques de codage qu'il est capable de recevoir. Cette table ou carte permettra à l'utilisateur de connaître les emplacements où il peut capter le mieux le signal TV, ou de choisir le type de technique de codage de signal TV sur lequel il vaut mieux se connecter en fonction de son emplacement géographique.
On présente ci-après différentes techniques pour la mise en oeuvre de l'étape d'analyse des signaux multimédia au niveau d'un terminal, comme le terminal 22, permettant de déterminer le niveau de qualité de chacun des signaux multimédia. On considère par exemple que l'on cherche à mesurer la qualité d'expérience perçue par l'utilisateur. Différentes techniques peuvent être envisagées, selon le « type » des signaux multimédia diffusés simultanément et portant des données représentatives d'une même séquence source. On considère ainsi dans un premier temps que les signaux multimédia sont de type vidéo, et on cherche à déterminer le niveau de qualité de chaque version de la séquence vidéo source considérée. Une première technique possible, de type « référence complète » (« full-reference » en anglais) met en oeuvre les sous-étapes suivantes : prélèvement d'au moins un échantillon de chacun des signaux vidéo, correspondant par exemple à une même image de la séquence source ; décodage des échantillons, tenant compte, pour chaque signal vidéo, de la technique de codage utilisée à la diffusion pour obtenir le signal vidéo correspondant ; comparaison des échantillons décodés à au moins un échantillon d'un signal de référence identifiant la même image de la séquence source. En d'autres termes, une telle technique compare une image dont on veut mesurer la qualité à une image de référence. Cette technique est également appelée SSIM (« Average Structural Similarity »), et décrite par exemple dans le document « Image quality assessment: from error visibility to structural similarity » (Z.Wang, A. Bovik, H. Sheikh et E.P. Simoncelli, IEEE Trans. Image Process., vol. 13, pages 600 à 612, avril 2004). On suppose par exemple qu'un signal de référence est envoyé de temps en temps, éventuellement avec des mécanismes additionnels de protection comme le codage correcteur d'erreur FEC (« Forward Error Coding »), la répétition de requêtes ARO (« Automatic Repeat Request ») ou le protocole de contrôle de transmission TCP (« Transmission Control Protocol »). On peut ainsi prélever des échantillons des signaux vidéo qui sont accompagnés d'un signal de référence.
En particulier, si l'on considère que plusieurs résolutions d'une même vidéo (HD et SD par exemple) peuvent être émises simultanément (par exemple SD et HD sur DVB, et HD sur LTE), le signal de référence peut être le signal SD. En effet, comme le signal SD est généralement codé d'une façon plus robuste, il pourra être utilisé comme signal de référence dans un réseau correctement dimensionné.
Par exemple, si le niveau de qualité obtenu pour une image d'un signal vidéo HD LTE est meilleur que le niveau de qualité obtenu pour une image correspondante d'un signal vidéo HD DVB, le terminal peut choisir de restituer les vidéos codées selon la technique de codage HD LTE. Si en revanche les deux images sont très dégradées, le terminal peut choisir de restituer les vidéos codées selon la technique de codage SD DVB. Une deuxième technique pour la détermination du niveau de qualité de chaque version de la séquence vidéo source considérée, de type « référence réduite » (« reduced-reference » en anglais) met en oeuvre les sous-étapes suivantes : prélèvement d'au moins un échantillon de chacun des signaux vidéo, identifiant une même image de la séquence source ; extraction d'au moins un descripteur pour chacun des échantillons prélevés, tenant compte, pour chaque signal vidéo, de la technique de codage utilisée à la diffusion pour obtenir le signal vidéo correspondant ; comparaison de l'ensemble des descripteurs extraits à au moins un ensemble de descripteurs de référence identifiant la même image de la séquence source. Dans ce cas, les images émises sont accompagnées d'un ensemble de descripteurs structurels mesurés sur l'image initiale de la séquence source. Un tel ensemble de descripteurs peut éventuellement être codé d'une façon robuste pour éviter les erreurs. On peut alors comparer les descripteurs de l'image dont on veut mesurer la qualité aux mêmes descripteurs relatifs à l'image initiale. En particulier, on peut appliquer une transformée ondelettes aux images, permettant d'obtenir un ensemble de coefficients, qu'il est possible de comparer image par image. Cette technique est décrite par exemple dans le document « Reduced-Reference Image Quality Assessment Using a Wavelet-Domain Natural Image Statistic Mode! » (Z. Wang et E.P.
Simoncelli, 17th Annual Symposium on Electronic Imaging, San José, CA, Etats-Unis, 17 au 20 janvier 2005). Les deux techniques présentées ci-dessus, ainsi que d'autres techniques de détermination d'un niveau de qualité d'un signal vidéo, peuvent également être adaptées aux signaux multimédia de type audio. Dans ce cas, les échantillons ne sont pas des images, ou des portions d'images, mais du son. En particulier, les techniques dites de PESO (en anglais « Perceptual Evaluation of Speech Quality », en français « évaluation de la qualité vocale perçue ») peuvent être utilisées pour déterminer la qualité d'un contenu sonore de type radio. Une telle technique est notamment présentée dans le document P.862 « Evaluation de la qualité vocale perçue : méthode objective d'évaluation de la qualité vocale de bout en bout des codecs vocaux et des réseaux téléphoniques à bande étroite » normalisé par l'Union internationale des télécommunications. Ainsi, selon les différentes techniques présentées, le terminal mobile prélève des échantillons des signaux multimédia reçus sur son ou ses interfaces radio, et pour chaque version reçue d'une séquence source, le terminal décode le signal multimédia correspondant (ou les échantillons prélevés), et détermine un niveau de qualité du signal multimédia. Il est donc nécessaire de décoder au moins une partie des différents signaux multimédia reçus, de façon à déterminer leur niveau de qualité. On rappelle que selon l'art antérieur, un seul signal multimédia reçu est décodé, en tenant compte de la puissance de réception d'un signal pilote accompagnant le signal multimédia, ou du type de technique de codage utilisée, sans tenir compte de la qualité des différents signaux multimédia. Or la puissance du signal pilote n'est pas une information suffisante pour connaître la qualité de réception du signal multimédia (qualité de service, qualité d'expérience). En d'autres termes, un « bon » pilote ne signifie pas nécessairement un établissement réussi d'appel, un bon débit, etc, et donc un bon niveau de qualité.
Un terminal selon l'invention peut notamment prélever des échantillons périodiquement, ou en fonction d'une variation du canal de transmission. La période de prélèvement peut notamment être adaptée en fonction de la mobilité du terminal. S'il est statique, on peut choisir de prélever un échantillon toutes les 60 secondes. Au contraire, s'il est mobile, on peut choisir de prélever un échantillon toutes les 5 secondes.
En particulier, les niveaux de qualité obtenus pour les différentes images et/ou sons des signaux multimédia peuvent être mémorisés avec une information de datation, permettant de décrire l'évolution de la qualité avec le temps. On tire ainsi parti du fait que les signaux multimédia sont diffusés en continu, indépendamment du fait que l'utilisateur du terminal mobile sélectionne l'application correspondante (par exemple télévision ou radio sur mobile) ou non.
Optionnellement, une fonction de moyenne/lissage temporel permet en outre de donner plus de poids aux niveaux de qualité associés à des instants de détermination récents qu'aux niveaux de qualité associés à des instants de détermination plus anciens. En particulier, si l'on détecte qu'un terminal est en situation de mobilité, il est possible d'affecter un poids nul aux niveaux de qualité déterminés lorsque le terminal était statique.
On présente finalement, en relation avec la figure 3, la structure simplifiée d'un dispositif de traitement de signaux multimédia mettant en oeuvre une technique de traitement de signaux multimédia selon au moins un mode de réalisation particulier décrit ci-dessus. En particulier, un tel dispositif peut être intégré à un terminal de télécommunication mobile de type téléphone intelligent, tablette, etc.
Un tel dispositif comprend une mémoire 31 M comprenant une mémoire tampon, une unité de traitement 32, équipée par exemple d'un microprocesseur ,uP, et pilotée par le programme d'ordinateur Pg 33, mettant en oeuvre le procédé de traitement de signaux multimédia selon l'invention. A l'initialisation, les instructions de code du programme d'ordinateur 33 sont par exemple chargées dans une mémoire RAM avant d'être exécutées par le processeur de l'unité de traitement 32. L'unité de traitement 32 reçoit en entrée au moins deux signaux multimédia respectifs, portant des données représentatives d'une même séquence source codée en utilisant des techniques de codage respectives distinctes, diffusés simultanément en temps réel. Le microprocesseur de l'unité de traitement 32 met en oeuvre les étapes du procédé de traitement décrit précédemment, selon les instructions du programme d'ordinateur 33, pour déterminer un niveau de qualité associé à chacun des signaux multimédia, par analyse d'au moins une image et/ou au moins un son de chacun des signaux multimédia, et pour classer les différents signaux selon leur niveau de qualité. Pour cela, le dispositif de traitement comprend, outre la mémoire tampon 31, un module de réception des signaux multimédia, un module d'analyse des signaux multimédia, et un module de classement des techniques de codage associées aux signaux multimédia, en fonction des niveaux de qualité. Ces moyens sont pilotés par le microprocesseur de l'unité de traitement 32.

Claims (14)

  1. REVENDICATIONS1. Procédé de traitement de signaux multimédia sur un terminal mobile, caractérisé en ce qu'il comprend : une étape de réception d'au moins deux signaux multimédia respectifs diffusés en temps réel, portant des données représentatives d'une même séquence source codée en utilisant des techniques de codage respectives distinctes, une étape d'analyse d'au moins une image et/ou d'au moins un son desdits signaux multimédia, de façon à déterminer un niveau de qualité associé à chacun desdits signaux multimédia, et une étape de classement des techniques de codage associées auxdits signaux multimédia, en fonction desdits niveaux de qualité.
  2. 2. Procédé de traitement selon la revendication 1, caractérisé en ce que lesdites étapes d'analyse et de classement sont mises en oeuvre périodiquement et/ou lorsqu'une variation d'un canal de transmission desdits signaux multimédia est détectée.
  3. 3. Procédé de traitement selon l'une quelconque des revendications 1 et 2, caractérisé en ce qu'il comprend une étape de sélection d'une desdites techniques de codage en fonction du niveau de qualité associé au signal multimédia correspondant et/ou d'au moins une préférence d'un utilisateur dudit terminal.
  4. 4. Procédé de traitement selon la revendication 3, caractérisé en ce qu'il comprend une étape de restitution, sur ledit terminal mobile, d'un signal multimédia portant des données représentatives d'une séquence codée en utilisant ladite technique de codage sélectionnée.
  5. 5. Procédé de traitement selon l'une quelconque des revendications 1 à 4, caractérisé en ce qu'il comprend une étape de mémorisation d'au moins un desdits niveaux de qualité associés auxdits signaux multimédia, ou de la technique de codage correspondante, et d'un instant de détermination desdits niveaux de qualité et/ou d'une position géographique dudit terminal mobile correspondante.
  6. 6. Procédé de traitement selon la revendication 5, caractérisé en ce qu'il met en oeuvre une étape de lissage temporel, affectant un poids aux niveaux de qualité mémorisés, ou aux techniques de codage correspondantes, en fonction desdits instants de détermination.
  7. 7. Procédé de traitement selon l'une quelconque des revendications 1 à 6, caractérisé en ce que ladite étape d'analyse mesure un niveau de qualité de type « qualité d'expérience ».
  8. 8. Procédé de traitement selon l'une quelconque des revendications 1 à 7, caractérisé en ce que ladite étape d'analyse met en oeuvre les sous-étapes suivantes : - prélèvement d'au moins un échantillon de chacun desdits signaux multimédia, identifiant une même portion de ladite séquence source ;- décodage desdits échantillons, tenant compte, pour chaque signal multimédia, de la technique de codage utilisée à la diffusion pour obtenir ledit signal multimédia ; comparaison des échantillons décodés à au moins un échantillon d'un signal de référence identifiant ladite même portion de la séquence source.
  9. 9. Procédé de traitement selon la revendication 8, caractérisé en ce que ledit signal de référence est un signal de définition standard, notée SD.
  10. 10. Procédé de traitement selon l'une quelconque des revendications 1 à 7, caractérisé en ce que ladite étape d'analyse met en oeuvre les sous-étapes suivantes : - prélèvement d'au moins un échantillon de chacun desdits signaux multimédia, identifiant une même portion de ladite séquence source ; extraction d'au moins un descripteur pour chacun des échantillons prélevés, tenant compte, pour chaque signal multimédia, de la technique de codage utilisée à la diffusion pour obtenir ledit signal multimédia ; comparaison de l'ensemble des descripteurs extraits à au moins un ensemble de descripteurs de référence identifiant ladite même portion de la séquence source.
  11. 11. Dispositif de traitement de signaux multimédia sur un terminal mobile, caractérisé en ce qu'il comprend : un module de réception d'au moins deux signaux multimédia respectifs diffusés en temps réel, portant des données représentatives d'une même séquence source codée en utilisant des techniques de codage respectives distinctes, un module d'analyse d'au moins une image et/ou d'au moins un son desdits signaux multimédia, de façon à déterminer un niveau de qualité associé à chacun desdits signaux multimédia, et un module de classement des techniques de codage associées auxdits signaux multimédia, en fonction desdits niveaux de qualité.
  12. 12. Terminal caractérisé en ce qu'il comprend un dispositif de traitement selon la revendication 11.
  13. 13. Programme d'ordinateur comportant des instructions pour la mise en oeuvre d'un procédé de traitement selon l'une quelconque des revendications 1 à 10 lorsque ce programme est exécuté par un processeur.
  14. 14. Support d'informations, inamovible, ou partiellement ou totalement amovible, lisible par un ordinateur, et comportant des instructions d'un programme d'ordinateur pour l'exécution des étapes d'un procédé de traitement selon l'une quelconque des revendications 1 à 10.
FR1453782A 2014-04-25 2014-04-25 Procede et dispositif de traitement de signaux multimedia, terminal, programme d'ordinateur et support de stockage correspondants. Withdrawn FR3020541A1 (fr)

Priority Applications (1)

Application Number Priority Date Filing Date Title
FR1453782A FR3020541A1 (fr) 2014-04-25 2014-04-25 Procede et dispositif de traitement de signaux multimedia, terminal, programme d'ordinateur et support de stockage correspondants.

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
FR1453782A FR3020541A1 (fr) 2014-04-25 2014-04-25 Procede et dispositif de traitement de signaux multimedia, terminal, programme d'ordinateur et support de stockage correspondants.

Publications (1)

Publication Number Publication Date
FR3020541A1 true FR3020541A1 (fr) 2015-10-30

Family

ID=51383812

Family Applications (1)

Application Number Title Priority Date Filing Date
FR1453782A Withdrawn FR3020541A1 (fr) 2014-04-25 2014-04-25 Procede et dispositif de traitement de signaux multimedia, terminal, programme d'ordinateur et support de stockage correspondants.

Country Status (1)

Country Link
FR (1) FR3020541A1 (fr)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019002224A1 (fr) * 2017-06-30 2019-01-03 Enensys Technologies Procédé de génération d'un flux de données, passerelle de diffusion, procédé et équipement de sélection d'un flux de données et programme d'ordinateur correspondant

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008070133A2 (fr) * 2006-12-06 2008-06-12 United Video Properties, Inc. Systèmes et procédés pour une sélection et un basculement de source multimédia

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008070133A2 (fr) * 2006-12-06 2008-06-12 United Video Properties, Inc. Systèmes et procédés pour une sélection et un basculement de source multimédia

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019002224A1 (fr) * 2017-06-30 2019-01-03 Enensys Technologies Procédé de génération d'un flux de données, passerelle de diffusion, procédé et équipement de sélection d'un flux de données et programme d'ordinateur correspondant
FR3068559A1 (fr) * 2017-06-30 2019-01-04 Enensys Technologies Procede de generation d'un flux de donnees, passerelle de diffusion, procede et equipement de selection d'un flux de donnees et programme d'ordinateur correspondant
US11368504B2 (en) 2017-06-30 2022-06-21 Enensys Technologies Method for generating a data stream, broadcast gateway, method and device for selecting a data stream and corresponding computer program

Similar Documents

Publication Publication Date Title
US11949891B2 (en) Systems and methods for region-of-interest tone remapping
US9608824B2 (en) Using digital fingerprints to associate data with a work
US10432985B2 (en) Method and apparatus for generating quality estimators
FR2840495A1 (fr) Procede et dispositif de selection d'une methode de transcodage parmi un ensemble de methodes de transcodage
EP3225027B1 (fr) Procédé de composition d'une représentation vidéo intermédiaire
US20190166170A1 (en) Video Streaming Delivery
WO2020025510A1 (fr) Procede de formation d'une sequence d'images de sortie a partir d'une sequence d'images d'entree, procede de reconstruction d'une sequence d'images d'entree a partir d'une sequence d'images de sortie, dispositifs, equipement serveur, equipement client et programmes d'ordinateurs associes
EP2947888B1 (fr) Procédé de téléchargement adaptatif de contenus numériques pour plusieurs écrans
EP1367765A1 (fr) Procédé de transmission optimisé de contenus multimedia
EP1591962A2 (fr) Procédé et dispositif de génération de vecteurs candidats pour les systèmes d'interpolation d'images par estimation et compensation de mouvement
FR3050895A1 (fr) Procede de composition contextuelle d'une representation video intermediaire
EP3496407A1 (fr) Procédé de gestion de la consommation électrique d'un dispositif électronique
FR3020541A1 (fr) Procede et dispositif de traitement de signaux multimedia, terminal, programme d'ordinateur et support de stockage correspondants.
US20220232275A1 (en) Adaptive bitrate video testing from screen recording
US10681105B2 (en) Decision engine for dynamically selecting media streams
EP4140136A1 (fr) Procédés et dispositifs de codage et de décodage d'une séquence vidéo multi-vues
EP3501125B1 (fr) Procédé de synchronisation de deux flux de données ainsi que mise en oeuvre de ce procédé dans un récepteur
EP3582500B1 (fr) Procédé, systeme et programme informatique d'analyse de la complexité d'un contenu multimédia source pour une diffusion à la demande
FR2916931A1 (fr) Procede de selection d'une donnee de codage et dispositif de codage implementant ledit procede
FR3105905A1 (fr) Procédés de transmission et de réception de flux, dispositifs et programme d'ordinateur associés
FR3020544A1 (fr) Transmission et telechargement de contenu decompose en segments de donnees temporels
FR2971906A1 (fr) Procede et appareil de fourniture de service de convergence de diffusion et de communication
FR3016263A1 (fr) Procede de traitement d'erreur de restitution d'un contenu numerique
FR3079705A1 (fr) Communication par video conference
WO2019102105A1 (fr) Communication par vidéo conférence

Legal Events

Date Code Title Description
PLFP Fee payment

Year of fee payment: 2

PLSC Publication of the preliminary search report

Effective date: 20151030

ST Notification of lapse

Effective date: 20161230