FR3041852A1 - Procede et dispositif d'enrichissement d'une fonction pause de la lecture d'une sequence d'images - Google Patents

Procede et dispositif d'enrichissement d'une fonction pause de la lecture d'une sequence d'images Download PDF

Info

Publication number
FR3041852A1
FR3041852A1 FR1559176A FR1559176A FR3041852A1 FR 3041852 A1 FR3041852 A1 FR 3041852A1 FR 1559176 A FR1559176 A FR 1559176A FR 1559176 A FR1559176 A FR 1559176A FR 3041852 A1 FR3041852 A1 FR 3041852A1
Authority
FR
France
Prior art keywords
enrichment
image
data
sequence
images
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
FR1559176A
Other languages
English (en)
Inventor
Chantal Guionnet
Frederic Massa
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Orange SA
Original Assignee
Orange SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Orange SA filed Critical Orange SA
Priority to FR1559176A priority Critical patent/FR3041852A1/fr
Publication of FR3041852A1 publication Critical patent/FR3041852A1/fr
Withdrawn legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4333—Processing operations in response to a pause request
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/036—Insert-editing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements

Abstract

L'invention concerne un procédé et un dispositif d'enrichissement d'une séquence d'images, comprenant au moins une image, et étant restituée via un dispositif d'affichage. Suite à la réception (22) d'une requête de pause de la restitution de la séquence d'images, la restitution est interrompue et une image de la séquence d'images est affichée (23) en fonction de l'instant d'interruption de la restitution. Au moins un élément représenté sur ladite image affichée est déterminé (25). Au moins une donnée d'enrichissement est obtenue (26) en fonction de l'instant d'interruption de la restitution et affichée (27) sur l'image en association avec ledit au moins un élément déterminé.

Description

PROCEDE ET DISPOSITIF D’ENRICHISSEMENT D’UNE FONCTION PAUSE DE LA LECTURE D’UNE SEQUENCE D’IMAGES L’invention concerne le domaine des images et de la vidéo numériques, et plus particulièrement l’enrichissement d’une séquence d’images à partir d’informations relatives au contenu représenté dans la séquence d’images.
Par séquence d’images, on entend ici aussi bien une vidéo constituée par une suite d’images, éventuellement codées-décodées selon un standard de compression connu de l’homme du métier, mais aussi une séquence pouvant comprendre une ou plusieurs images fixes.
La vidéo numérique est en particulier utilisée pour fournir des services tels que la télévision sur Internet (IPTV pour Internet Protocol TV en anglais), la VOD (pour Video On Demand en anglais), la télévision par satellite ou encore la TNT (pour télévision numérique terrestre en français). De tels services nécessitent l’utilisation d’un décodeur numérique pour décoder le flux vidéo reçu depuis le fournisseur de service et un dispositif d’affichage pour afficher les images décodées du flux vidéo.
De tels services de vidéo numérique sont en général fournis avec un certain nombre de fonctionnalités permettant à un utilisateur d’agir sur la restitution de la vidéo. Ainsi, certains services de vidéo numérique proposent une fonction de pause sur images de la vidéo. Lorsqu’un utilisateur regarde une vidéo numérique ou une séquence d’images numériques, il a alors la possibilité d’arrêter momentanément la restitution de la vidéo en activant la fonction pause, par exemple via une touche de la télécommande associée au décodeur numérique.
Par exemple, l’utilisateur peut activer la fonction pause pour observer une image particulière de la vidéo ou parce qu’il a une contrainte temporaire qui l’empêche de regarder la suite de la vidéo.
Après l’activation de la fonction pause, lorsque l’utilisateur est prêt à regarder la suite de la vidéo, il relance la lecture de la vidéo, par exemple via une touche de la télécommande. Le décodeur vidéo reprend alors le traitement du flux vidéo à partir de l’instant d’interruption dans le flux vidéo et les images de la vidéo qui sont affichées sur le dispositif d’affichage sont celles correspondant aux images de la vidéo à partir de l’instant d’interruption.
Lorsque l’utilisateur arrête la visualisation d’une vidéo pendant un long moment, il arrive qu’il ne comprenne plus le contenu de la vidéo car il a pu oublier l’histoire du film qu’il regardait avant l’interruption. De même, lorsqu’un utilisateur change de chaîne et commence à regarder une vidéo dont il a raté le début, l’utilisateur peut mettre du temps à comprendre l'histoire de la vidéo, voire se décourager et ne plus regarder.
Les services de vidéo numérique fournissent aussi en plus du flux de la vidéo des informations concernant la vidéo. Par exemple, dans le cas de la télévision numérique, un guide des programmes, ainsi que de brèves informations relatives au contenu des programmes, telles qu’un résumé du programme en cours, le nom des interprètes, la durée du programme, sont souvent diffusés.
Mais de telles informations sont limitées et ne permettent pas une bonne compréhension du programme lorsque l’utilisateur ne l’a pas regardé depuis le début, par exemple si l’utilisateur commence à regarder un film déjà commencé ou décide de regarder une série dont il n’a pas vu les épisodes précédents.
Le document W02015104083A1 propose un procédé pour aider un utilisateur à obtenir des informations relatives à des objets représentés dans une vidéo en cours de restitution par un terminal. Un tel procédé consiste à interrompre la restitution sur un dispositif d’affichage d’une vidéo, suite à la réception par le dispositif d’affichage d’une première commande de pause de la vidéo en cours de restitution. Un dispositif de traitement d’images identifie des objets dans l’image de la vidéo sur laquelle l’utilisateur a commandé la pause. Suite à la réception d’une deuxième commande de l’utilisateur sélectionnant un objet de l’image, une requête de recherche relative à l’objet sélectionné est transmise à un serveur de recherche. Un tel serveur effectue alors une recherche sur Internet à partir de mots-clés associés à l’objet et fournit en retour le résultat de la recherche à l’utilisateur.
Un tel procédé permet ainsi d’obtenir des informations disponibles sur Internet relatives à des objets représentés dans une vidéo, par exemple en vue d’un achat.
Cependant, les informations obtenues dépendent des informations disponibles sur Internet en rapport avec l’objet recherché. Ainsi, l’utilisateur n’est pas certain d’obtenir des informations pertinentes pour l’aider à comprendre le contenu de la vidéo.
De plus, la restitution des informations sur l’objet n’est pas optimale pour l’utilisateur.
Un des buts de l'invention est d'apporter des améliorations par rapport à l'état de la technique.
Elle propose à cet effet un procédé d’enrichissement d’une séquence d’images, mis en œuvre par un dispositif de traitement, ladite séquence d’images comprenant au moins une image, et étant restituée via un dispositif d’affichage, le procédé comprend les étapes suivantes : - suite à la réception d’une requête de pause de la restitution de la séquence d’images, interruption de ladite restitution, - affichage d’une image de la séquence d’images en fonction de l’instant d’interruption de la restitution, - détermination d’au moins un élément représenté sur ladite image affichée, - obtention d’au moins une donnée d’enrichissement en fonction de l’instant d’interruption de la restitution, - affichage sur l’image de ladite au moins une donnée d’enrichissement en association avec ledit au moins un élément déterminé. L’invention permet ainsi à un utilisateur d’obtenir des données d’enrichissement relatives à des objets ou personnes représentés sur des images d’une séquence d’images en fonction de l’instant d’interruption de la restitution de la séquence d’images.
Ainsi, les données d’enrichissement qui sont affichées à l’utilisateur varient en fonction de l’instant d’interruption de la séquence d’images. Pour un même élément apparaissant dans des images à des instants temporels de la séquence d’images distincts, les données d’enrichissement relatives à cet élément peuvent être différentes.
Par exemple, lorsque la séquence d’images est une vidéo d’un film, les éléments détectés dans la séquence d’images peuvent correspondre à des visages de personnes intervenant dans le film et les données d’enrichissement correspondent à des informations relatives à de telles personnes et qui dépendent de l’instant dans la vidéo où la vidéo a été interrompue. Par exemple, pour un visage de personne détecté dans une image de la vidéo, les données d’enrichissement comprennent des informations statiques relatives au visage de la personne détectée telles que le nom du personnage, la relation du personnage en question avec d’autres personnages du film, le rôle du personnage dans le film, et également des informations dynamiques qui sont dépendantes de l’instant d’interruption de la vidéo telles que les dernières actions effectuées par le personnage, et/ou les prochaines actions que le personnage effectuera au cours du film, les relations du personnage avec d’autres personnafes du film lorsque ces relations évoluent, etc... Avantageusement, les données d’enrichissement sont affichées sur l’image sur laquelle l’interruption a été effectuée en association avec les éléments détectés. Ainsi, l’expérience de l’utilisateur est améliorée. Il n’est pas nécessaire pour visualiser les données d’enrichissement d’utiliser une application autre que l’application utilisée pour restituer la séquence d’images.
Les différents modes ou caractéristiques de réalisation mentionnés ci-après peuvent être ajoutés indépendamment ou en combinaison les uns avec les autres, aux étapes du procédé d’enrichissement défini ci-dessus.
Selon un mode particulier de réalisation de l’invention,le procédé comprend en outre la réception d’une indication d’un type de données d’enrichissement à afficher.
Selon ce mode particulier de réalisation de l’invention, l’utilisateur peut indiquer le type de données d’enrichissement qu’il souhaite afficher : par exemple des données d’enrichissement relatives à des actions passées ou relatives à des actions futures dans la séquence d’images. L’indication d’un type des données d’enrichissement peut être comprise dans la requête de pause. Par exemple, un bouton d’un dispositif de commande associé au dispositif de traitement est associé à chaque type de données d’enrichissement. L’indication d’un type des données d’enrichissement peut aussi être fournie via un menu suite à la requête de pause. Par exemple, le dispositif de traitement peut afficher sur l’image un menu comprenant des types de données d’enrichissement pouvant être obtenues et qui peuvent être sélectionnés via une interaction utilisateur sur un dispositif de commande du dispositif de traitement.
Selon un autre mode particulier de réalisation de l’invention, ladite au moins une donnée d’enrichissement est stockée en association avec au moins un instant temporel de la séquence d’images.
Ainsi, lorsque les données d’enrichissement associées à des éléments représentés dans des images d’une séquence d’images sont associées à une ou plusieurs images de la séquence d’image ou à un instant temporel, il est plus facile et plus rapide de retrouver de telles données d’enrichissement après qu’un utilisateur a déclenché une fonction pause lors de la restitution de la séquence d’images.
Les données d’enrichissement associées à un instant temporel s’appliquent à un groupe d’images consécutives temporellement de la séquence d’images, c’est-à-dire des images qui se suivent selon l’ordre de restitution des images de la séquence d’images. Les données d’enrichissement associées à un instant temporel s’appliquent donc à un intervalle de temps commençant à cet instant temporel.
Ainsi, il n’est pas nécessaire de définir des données d’enrichissement pour chaque image de la séquence d’images. Les données d’enrichissement peuvent être définies pour un groupe d’images ou pour un intervalle de temps.
Selon un autre mode particulier de réalisation de l’invention, lorsque la séquence d’images est reçue par le dispositif de traitement sous la forme d’un flux de données codées, ladite au moins une donnée d’enrichissement est reçue par le dispositif de traitement de manière synchronisée avec les données codées du flux de données correspondant à l’instant temporel auquel ladite donnée d’enrichissement est associée. Selon ce mode particulier de réalisation de l’invention, les données d’enrichissement sont reçues par le dispositif de traitement en parallèle du flux de données codées de la séquence d’images. Un tel flux de données codées comprend notamment une composante vidéo correspondant aux données codées des images de la séquence d’images et une composante audio correspondant aux données codées du son de la séquence d’images.
Ainsi, les données d’enrichissement sont reçues au fur et à mesure de la réception des données codées correspondant aux images pour lesquelles les données d’enrichissement sont pertinentes. Ce mode particulier de réalisation de l’invention est avantageux par exemple lorsque le flux de données codées est un programme ou contenu vidéo transmis par un fournisseur de services de vidéo numérique via un réseau de communication. Un tel mode de réalisation de l’invention ne nécessite pas de canal de retour via lequel le dispositif de traitement demande au fournisseur de services les données d’enrichissement. Selon un autre mode particulier de réalisation de l’invention, ladite au moins une donnée d’enrichissement est comprise dans une composante dudit flux de données codées. Avantageusement, l’invention permet la transmission des données d’enrichissement dans un canal de transmission du flux de données codées. Par exemple, lorsque le flux de données codées est transmis selon le standard MPEG-2 TS, les données d’enrichissement peuvent être insérées dans la composante « data >> (données en français) du flux de données codées ou dans une nouvelle composante d’une version évoluée dudit standard.
Selon un autre mode particulier de réalisation de l’invention, lorsque ladite au moins une donnée d’enrichissement est associée à un groupe d’instants temporels de la séquence d’images, ladite au moins une donnée d’enrichissement est transmise à intervalles réguliers en parallèle des données codées du flux de données codées relatives audit groupe d’instants temporels.
Ce mode particulier est avantageux dans le cas où la séquence d’images est un flux vidéo d’une chaîne de télévision et que l’utilisateur change de chaîne de télévision (zapping en anglais). Lorsque l’utilisateur change de chaîne de télévision, le dispositif de traitement restitue les images de la nouvelle chaîne de télévision. Lorsque les données d’enrichissement sont associées à plusieurs instants temporels, les données d’enrichissement reçues avant le zapping ne correspondent alors plus à la séquence d’images qui est restituée après le zapping.
Selon un autre mode particulier de réalisation de l’invention, ladite donnée d’enrichissement est obtenue à partir d’un espace de stockage du dispositif de traitement. Ce mode particulier de réalisation de l’invention permet d’optimiser la transmission des données d’enrichissement au dispositif de traitement en anticipant leur transmission. Ainsi, toutes les données d’enrichissement relatives à une séquence d’images sont téléchargées et enregistrées par le dispositif de traitement avant la réception de ladite séquence d’images ou au début de la réception de ladite séquence d’images.
Ce mode particulier de réalisation de l’invention est avantageux dans le cas où la séquence d’images est une vidéo fournie par un service de vidéo à la demande.
De plus, l’obtention des données d’enrichissement pour l’utilisateur est ainsi plus rapide car il n’est pas nécessaire d’accéder via un réseau de communication à un serveur distant du dispositif de traitement.
Selon un autre mode particulier de réalisation de l’invention, la détermination dudit au moins un élément est effectuée par comparaison d’une zone de l’image obtenue avec au moins une image de référence relative à un élément associé à une donnée d’enrichissement associée audit instant d’interruption.
Ce mode particulier de réalisation de l’invention permet d’identifier des éléments dans l’image sur laquelle l’utilisateur a fait pause à partir de l’instant d’interruption. Ainsi, le temps de traitement est optimisé car seuls des éléments pour lesquels le dispositif de traitement dispose de données d’enrichissement sont recherchés dans l’image obtenue. Selon un autre mode particulier de réalisation de l’invention, ladite donnée d’enrichissement est mise à jour suite à l’occurrence d’un évènement relatif à l’élément déterminé.
Selon ce mode particulier de réalisation de l’invention, lorsque la séquence d’images est une photo ou une suite de photos, les éléments détectés dans l’image peuvent correspondre à des visages de personnes apparaissant sur les photos. Dans ce mode de réalisation, les données d’enrichissement comprennent notamment des informations telles que le nom des personnes, les relations entre les personnes, et en particulier des évènements récents de la vie des personnes détectées. Avantageusement, de tels évènements dépendent de la date de restitution de la séquence d’images. Ce mode particulier de réalisation est avantageux dans le cas où la séquence d’images est une vidéo ou des photos personnelles, ou familiales.
Selon un autre exemple, lorsque la séquence d’images est une vidéo, par exemple une vidéo d’un reportage ou d’un journal télévisé, ce mode de réalisation de l’invention permet de fournir à l’utilisateur des données d’enrichissements qui dépendent non seulement de l’instant d’interruption de la vidéo par l’utilisateur mais également qui dépendent de la date de la restitution de la vidéo. Ainsi, les données d’enrichissements comprennent des informations récentes. Par exemple, les données d’enrichissement initialement associées à la séquence d’images peuvent avoir été mises à jour en fonction d’évènements qui se sont produits entre le moment où la séquence d’images a été réalisée et la date de la restitution de la séquence d’images par le dispositif de traitement.
Ce mode particulier de réalisation de l’invention permet de fournir des données d’enrichissement dynamiques, c’est-à-dire des données d’enrichissement qui varient au cours du temps.
Selon un autre mode particulier de réalisation de l’invention, le procédé comprend en outre les étapes suivantes : - réception par le dispositif de traitement, d’une commande de sélection d’un élément détecté, - réception d’une commande de navigation dans la séquence d’images comprenant un sens de parcours des images, - obtention d’au moins une nouvelle donnée d’enrichissement associée audit élément sélectionné, à partir d’un instant de la séquence d’images situé après l’instant d’interruption selon ledit sens de parcours des images, ladite nouvelle donnée d’enrichissement obtenue étant différente de ladite donnée d’enrichissement associée audit élément sélectionné et audit instant d’interruption, - détermination d’une image de la séquence d’images correspondant à l’instant de la séquence d’images associé à la nouvelle donnée d’enrichissement et dans laquelle ledit élément sélectionné est représenté, - affichage sur l’image déterminée de ladite au moins une nouvelle donnée d’enrichissement en association avec ledit au moins un élément sélectionné.
Ce mode particulier de réalisation de l’invention permet de naviguer parmi les images de la séquence d’images en suivant un élément détecté sélectionné et d’obtenir les données d’enrichissement relatives à cet élément sélectionné en rapport avec les images dans lesquelles cet élément est représenté. Par exemple, dans le cas où la séquence d’images est une vidéo, il est ainsi possible de suivre un personnage du film (l’élément détecté correspond alors au visage du personnage dans le film) dans différentes scènes ou images du film et d’obtenir des informations sur ce personnage en fonction du moment dans le film où il apparaît. L’utilisateur peut ainsi suivre le personnage en fonction de révolution des données d’enrichissement qui lui sont associées. L’invention concerne également un dispositif de traitement d’une séquence d’images adapté pour mettre en œuvre le procédé d’enrichissement selon l’un quelconque des modes particuliers de réalisation de l’invention. L’invention concerne aussi un terminal comprenant un dispositif de traitement défini précédemment. L’invention concerne aussi un serveur comprenant un dispositif de traitement défini précédemment. L’invention concerne aussi une base de données d’enrichissement adaptée pour : - enregistrer au moins une donnée d’enrichissement associée à au moins un instant d’une séquence d’images, - recevoir une requête de données d’enrichissement comprenant une référence à un instant d’une séquence d’images, en provenance d’un dispositif de traitement de la séquence d’images ou d’un serveur de fourniture d’un flux de données codées relatives à la séquence d’images, - fournir audit dispositif de traitement ou audit serveur, au moins une donnée d’enrichissement déterminée en fonction de ladite référence.
Selon un mode particulier de réalisation de l’invention, ladite au moins une donnée d’enrichissement est enregistrée en association avec un identifiant d’un élément représenté dans une image de la séquence d’images, ladite image correspondant à l’instant auquel la donnée d’enrichissement est associée. De plus, la requête de données d’enrichissement comprend une référence à un tel identifiant et la donnée d’enrichissement fournie est déterminée en plus en fonction d’un tel identifiant.
Ainsi, il est possible d’obtenir une donnée d’enrichissement relative non seulement à un instant de la séquence d’images, mais aussi relative à un élément représenté dans une image de la séquence d’images correspondant à cet instant. L’invention concerne également un système d’enrichissement d’une séquence d’images comprenant un terminal et une base de données d’enrichissement tels que définis précédemment.
Dans un mode particulier de réalisation de l’invention, les différentes étapes du procédé d’enrichissement sont mises en œuvre par des instructions de programmes d’ordinateurs. En conséquence, l’invention vise aussi des programmes d’ordinateur sur un support d’informations, ces programmes étant susceptibles d’être mis en œuvre respectivement dans un terminal ou plus généralement dans un ordinateur, ces programmes comportant respectivement des instructions adaptées à la mise en œuvre des différentes étapes du procédé d’enrichissement qui vient d'être décrit.
Ces programmes peuvent utiliser n’importe quel langage de programmation, et être sous la forme de code source, code objet, ou de code intermédiaire entre code source et code objet, tel que dans une forme partiellement compilée, ou dans n’importe quelle autre forme souhaitable. L’invention vise aussi un support d'informations lisible par un ordinateur, et comportant des instructions d'un programme d'ordinateur tel que mentionné ci-dessus.
Le support d'informations peut être n'importe quelle entité ou dispositif capable de stocker le programme. Par exemple, le support peut comporter un moyen de stockage, tel qu'une ROM, par exemple un CD ROM ou une ROM de circuit microélectronique, ou encore un moyen d'enregistrement magnétique ou électronique, par exemple une clé USB ou un disque dur. D'autre part, le support d'informations peut être un support transmissible tel qu'un signal électrique ou optique, qui peut être acheminé via un câble électrique ou optique, par radio ou par d'autres moyens. Le programme selon l'invention peut être en particulier téléchargé sur un réseau de type Internet.
Alternativement, le support d'informations peut être un circuit intégré dans lequel le programme est incorporé, le circuit étant adapté pour exécuter ou pour être utilisé dans l'exécution du procédé d’enrichissement en question.
Les avantages du dispositif de traitement, du terminal, du serveur, de la base de données et du programme d’ordinateur comportant des instructions adaptées à la mise en oeuvre des différentes étapes du procédé d’enrichissement sont identiques à ceux présentés en relation avec le procédé d’enrichissement selon l’un quelconque des modes particuliers de réalisation mentionnés ci-dessus.
Liste des figures D'autres avantages et caractéristiques de l'invention apparaîtront plus clairement à la lecture de la description suivante d'un mode de réalisation particulier de l'invention, donné à titre de simple exemple illustratif et non limitatif, et des dessins annexés, parmi lesquels: - la figure 1 illustre un environnement de mise en oeuvre de l’invention selon un mode particulier de réalisation de l’invention, - la figure 2 illustre schématiquement des étapes du procédé d’enrichissement selon un mode particulier de réalisation de l’invention, - la figure 3 illustre schématiquement des étapes du procédé d’enrichissement selon un autre mode particulier de réalisation de l’invention, - la figure 4 illustre un dispositif apte à mettre en œuvre le procédé d’enrichissement selon un mode particulier de réalisation de l’invention, - la figure 5 illustre une base de données adaptée pour mettre en œuvre le procédé d’enrichissement selon un mode particulier de réalisation de l’invention, - la figure 6 illustre schématiquement une structure de données adaptée pour stocker des données d’enrichissement en association avec une séquence d’images selon un mode particulier de réalisation de l’invention, - la figure 7 illustre schématiquement la réception des données d’enrichissement associées à une séquence d’images au cours du temps de lecture de la séquence d’images, selon un mode particulier de réalisation de l’invention, - les figures 8A et 8B illustrent le résultat avant-après d’un enrichissement de la séquence d’images selon un mode particulier de réalisation de l’invention.
Description d'un mode particulier de réalisation de l'invention
La figure 1 illustre un environnement de mise en oeuvre de l’invention selon un mode particulier de réalisation de l’invention. L’invention est ici décrite dans le cas d’un service TV (pour télévision) fourni par un opérateur via un réseau de communication, tel qu’un réseau IP (pour Internet Protocol). L’environnement de la figure 1 comprend : - un réseau de communication RES, par exemple un réseau de données basé sur le protocole IP, adapté pour transporter des flux de données du service de télévision, - un décodeur DEC d’un utilisateur, connecté au réseau RES via une passerelle domestique (non représentée), le décodeur DEC est adapté à recevoir et à décoder les flux de données du service de télévision pour reconstruire un flux vidéo destiné à être joué à un utilisateur, - un dispositif d’affichage AFF associé au décodeur, par exemple un écran, adapté pour jouer le flux vidéo reconstruit, - un dispositif de commande CMD du décodeur, par exemple une télécommande, ou une application installée sur un terminal mobile, adapté pour commander les fonctionnalités offertes par le décodeur et le service de télévision. Le dispositif de commande CMD permet à un utilisateur d’activer les fonctionnalités connues d’un tel service : pause de la lecture du flux vidéo, affichage d’un guide des programmes, changement de chaîne de télévision, avance ou retour rapide dans le flux vidéo, accès à des services supplémentaires tels que jeux, vidéo à la demande, applications, ... Sur réception d’une commande émise par l’utilisateur via le dispositif de commande CMD, le décodeur DEC applique la fonction demandée via la commande reçue (par exemple pause) et/ou transmet la commande à un serveur SERV de l’opérateur (par exemple lors d’un changement de chaîne de télévision). - un serveur SERV de l’opérateur connecté au réseau RES et adapté pour transmettre suite à la réception d’une commande un flux de données correspondant à au moins une chaîne de télévision ou une vidéo. - une base de données BDE adaptée pour stocker des données d’enrichissement d’un flux vidéo, c’est-à-dire d’une séquence d’images.
Selon le mode particulier de réalisation de l’invention décrit ici, le décodeur DEC comprend un dispositif d’enrichissement adapté à mettre en œuvre le procédé d’enrichissement. En variante, le dispositif d’enrichissement peut être compris dans tout terminal adapté pour restituer un flux vidéo, ou dans un serveur.
Lorsqu’un utilisateur regarde un flux vidéo reçu et décodé par le décodeur DEC, il peut actionner, par exemple via le dispositif de commande CMD, une fonctionnalité de pause de la lecture du flux vidéo. Dans ce cas, le décodeur interrompt la lecture du flux vidéo et commande l’affichage au dispositif d’affichage d’une image de la vidéo sur laquelle l’utilisateur a activé la pause. Par exemple, un tel affichage est illustré par la figure 8A. Selon l’invention, sur requête de l’utilisateur ou directement après la pause de la lecture de la vidéo, le décodeur obtient des données d’enrichissement relatives à la vidéo et à l’instant d’interruption de la lecture de la vidéo. Des telles données d’enrichissement sont obtenues depuis un espace mémoire du décodeur si les données d’enrichissement associées au flux vidéo ont été reçues lors d’une étape préalable à la lecture de la vidéo, ou si les données d’enrichissement sont reçues au fur et à mesure de la réception du flux de données codées de la vidéo par le décodeur.
En variante, les données d’enrichissement peuvent être obtenues en provenance de la base de données BDE sur requête du décodeur suite à l’activation de la pause.
Lorsque le décodeur DEC a obtenu des données d’enrichissement relatives à l’instant d’interruption de la vidéo, le décodeur DEC commande l’affichage de telles données sur l’image arrêtée. Un tel affichage est représenté par la figure 8B. La figure 8B illustre l’image sur laquelle la pause a eu lieu. Trois éléments représentés dans l’image sont identifiés et indiqués à l’utilisateur par un rond en trait épais (docteur, fille, chat). A chaque élément identifié, une donnée d’enrichissement est associée. Une telle donnée d’enrichissement donne à l’utilisateur des informations relatives à l’élément identifié et qui dépendent de l’instant d’interruption de la vidéo. Par exemple, les données d’enrichissement indiquent les dernières actions ou derniers évènements subis par les éléments identifiés.
Un dispositif d’enrichissement adapté à mettre en œuvre le procédé d’enrichissement selon un mode particulier de réalisation de l’invention est décrit en relation avec la figure 4. Le dispositif DISP a l’architecture classique d’un ordinateur. Le dispositif DISP comprend un module de stockage MEM, par exemple une mémoire, une unité de traitement PROC, équipée par exemple d'un microprocesseur, et pilotée par le programme d'ordinateur PG mettant en œuvre le procédé d’enrichissement tel que décrit ultérieurement en relation avec les figures 2 et 3. A l'initialisation, les instructions de code du programme d'ordinateur PG sont par exemple chargées en mémoire MEM avant d'être exécutées par le processeur de l'unité de traitement PROC. Le processeur de l'unité de traitement PROC met en œuvre les étapes du procédé d’enrichissement d’une séquence d’images comprenant au moins une image, et étant restituée via le dispositif d’affichage AFF, selon les instructions du programme d'ordinateur PG.
Le module de traitement PROC commande la restitution de la séquence d’images à un module de commande AFFI du dispositif DISP. Le module de commande AFFI communique avec le dispositif d’affichage AFF pour commander au dispositif d’affichage AFF l’affichage des images de la vidéo.
Le dispositif DISP comprend un module de réception I/O de requête de pause de la restitution de la séquence d’images. Un tel module de réception I/O est apte à communiquer avec le dispositif CMD, par exemple via une liaison infrarouge.
Suite à la réception d’une requête de pause, le module de traitement PROC interrompt la restitution de la séquence d’images et commande le module de commande AFFI pour afficher une image de la séquence d’images en fonction de l’instant d’interruption de la restitution.
Le module de traitement PROC détermine au moins élément représenté sur ladite image affichée, obtient au moins une donnée d’enrichissement en fonction de l’instant d’interruption de la restitution et commande le module de commande AFFI pour afficher sur l’image les données d’enrichissement obtenues en association avec les éléments déterminés.
Le dispositif DISP comprend également un module de communication COM. Le module de communication COM permet notamment au dispositif DISP de recevoir le flux de données codées de la vidéo en provenance du serveur SERV et les données d’enrichissement en provenance du serveur SERV ou de la base de données BDE. L’architecture d’une base de données BDE est illustrée par la figure 5 selon un mode particulier de réalisation de l’invention.
La base de données BDE a l’architecture classique d’un ordinateur. La base de données BDE comprend un module de stockage MEM5, par exemple une mémoire, un module de traitement PROC5, équipé par exemple d'un microprocesseur, et piloté par un programme d'ordinateur PG5.
Le module de stockage MEM5 permet notamment à la base de données BDE de stocker des données d’enrichissement en association avec un flux vidéo (VID) tel qu’illustré par la figure 6 décrite ultérieurement, selon un mode particulier de réalisation de l’invention. A l'initialisation, les instructions de code du programme d'ordinateur PG5 sont par exemple chargées en mémoire MEM5 avant d'être exécutées par le processeur du module de traitement PROC5.
Selon les instructions du programme d'ordinateur PG5, le processeur du module de traitement PROC5 met notamment en œuvre des étapes pour : - enregistrer au moins une donnée d’enrichissement associée à au moins une image ou à au moins un instant d’une séquence d’images (VID), - recevoir une requête de données d’enrichissement comprenant une référence à une image ou à un instant d’une séquence d’images (VID), en provenance d’un dispositif de traitement (DEC) de la séquence d’images ou d’un serveur (SERV) de fourniture d’un flux de données codées relatives à la séquence d’images (VID), - fournir audit dispositif de traitement ou audit serveur, au moins une donnée d’enrichissement déterminée en fonction de ladite référence.
La base de données BDE comprend donc aussi un module de communication COM5 adapté pour permettre à la base de données de communiquer avec d’autres équipements via notamment le réseau de communication RES. Le module de communication COM5 coopère avec le module de traitement PROC5 pour permettre notamment à la base de données BDE de recevoir une requête de données d’enrichissement et de fournir au moins une donnée d’enrichissement.
La figure 6 illustre schématiquement l’association de données d’enrichissement avec un flux vidéo VID telle qu’elle peut être stockée par la base de données BDE, selon un exemple de réalisation. Les données d’enrichissement associées au flux vidéo VID comprennent, selon cet exemple, trois groupes (DE1, DE2, et DEn) de données d’enrichissement relatifs à trois instants de la vidéo VID : T1, T2, Tn.
Pour chaque groupe de données d’enrichissement relatif à un instant ti de la vidéo, un certain nombre d’éléments qui sont représentés dans la vidéo à l’instant ti sont identifiés. Par exemple : - pour l’instant T1 : deux éléments sont identifiés ELT1 et ELT2, - pour l’instant T2 : deux éléments sont identifiées : ELT 1 déjà identifié à T1 et ELT3 qui est nouvel élément. A l’instant T2, l’élément ELT2 qui est identifié à l’instant T1 n’est plus identifié à l’instant T2, - pour l’instant Tn : un élément ELTk.
Un élément ELTj identifié à un instant Ti de la vidéo correspond par exemple à un personnage de la vidéo (par exemple : docteur, fille ou chat illustrés en figures 8A et 8B) ou à un objet représenté dans la vidéo (par exemple lorsqu’un objet a un intérêt particulier pour la compréhension de l’histoire du film). A chaque élément ELTj identifié à un instant Ti, des données d’enrichissement sont associées. Par exemple : - pour l’élément ELT1 : des données D11, D12 et D13 sont associées à l’instant T1 et des données D14 sont associées à l’instant T2. En fonction de l’instant de la pause de la lecture du flux vidéo VID, les données d’enrichissement affichées pour l’élément ELT1 seront donc différentes selon que l’instant d’interruption est situé entre T1 et T2 ou entre T2 et Tn. - pour l’élément ELT2 : des données D21 et D22 sont associées à l’instant T2. - pour l’élément ELTk : des données Dki, Dkj sont associées à l’instant Tn.
Les données d’enrichissement associées à un élément identifié ELTj et à un instant Ti de la vidéo ont une durée de validité (non représentée) qui commence à l’instant Ti pour lequel les données ont été définies, jusqu’au prochain instant Ti+p de la vidéo pour lequel de nouvelles données d’enrichissement sont définies, p étant supérieur ou égal à 1. A l’instant Ti+p, des nouveaux éléments peuvent être représentés sur l’image de la vidéo, de nouveaux éléments sont alors identifiés à l’instant Ti+p. Pour un élément ELTj identifié à la fois à l’instant Ti et à l’instant Ti+p, les données d’enrichissement qui sont associées à l’élément ELTj à l’instant Ti+p peuvent être identiques à celles de l’instant Ti, par exemple lorsqu’aucun changement n’a eu lieu dans l’histoire du film pour cet élément ELTj. Elles peuvent aussi être différentes lorsqu’un changement s’est produit pour cet élément ELTj, par exemple une nouvelle action, un nouvel évènement dans le film.
Ainsi, lorsque l’instant Tpaus d’interruption de la lecture de la vidéo VID intervient entre l’instant Ti et l’instant Ti+p, les données d’enrichissement qui seront affichées sur l’image correspondant à l’instant Tpaus sont les données d’enrichissement associées à l’instant Ti. Dans le mode particulier de réalisation décrit ici, les données d’enrichissement sont associées à un instant temporel de la vidéo. Un tel instant correspond à une unité de temps de la séquence vidéo. Il peut s’exprimer en secondes, millisecondes, etc. L’unité de temps permettant de représenter l’instant temporel peut aussi être mesurer par rapport à un numéro d’image de la séquence vidéo, ou encore un « timestamps » du flux de transport de la vidéo. Les données d’enrichissement sont alors associées à une ou plusieurs images de la vidéo.
Selon un mode particulier de réalisation de l’invention, les données d’enrichissement sont associées un indicateur indiquant le type de données d’enrichissement (passé/futur). Ainsi, il est possible de filtrer les données d’enrichissement selon leur type.
Le procédé d’enrichissement selon un mode particulier de réalisation de l’invention va maintenant être décrit en relation avec la figure 2.
Lors d’une étape 20 (REC_DAT), le décodeur DEC reçoit via son module de communication un flux de données codées d’une vidéo en provenance du serveur SERV. Selon une première variante, lors de l’étape 20, le décodeur DEC reçoit en parallèle des données d’enrichissement relatives à la vidéo en cours de lecture. Par exemple, une telle transmission est illustrée en figure 7 décrite plus loin.
Par exemple, lorsque le flux de données codées est transmis selon le protocole de transport de données MPEG-2 TS, les données d’enrichissement sont transmises dans une composante « data » (données en français) du flux ou dans une nouvelle composante de standard à définir. D’autres standards de transport de flux vidéo peuvent être utilisés.
Selon cette variante, le serveur SERV insère dans le flux de données codées avec les données codées relatives à un instant Ti de la vidéo, les données d’enrichissement relatives au même instant Ti.
Selon une deuxième variante, le décodeur DEC reçoit des données d’enrichissement relatives à la vidéo préalablement à la lecture du flux vidéo. Selon cette variante, toutes les données d’enrichissement relatives à la vidéo sont reçues au début de la transmission du flux vidéo et mémorisées par le décodeur. Cette variante est intéressante dans le cas où le flux vidéo est une vidéo téléchargée par le décodeur avant la restitution.
Lors d’une étape 21 (RESTJM), le décodeur DEC restitue les images de la vidéo via le dispositif d’affichage. Pour cela, le décodeur DEC lit le flux de données codées de la vidéo reçu, décode les données codées du flux vidéo, reconstruit les images de la vidéo et transmet les images reconstruites au dispositif d’affichage AFF.
Lors d’une étape 22, le décodeur DEC reçoit une requête (CMD_PAUS) de pause de la lecture de la vidéo à un instant Tpaus de la lecture de la vidéo VID. Lors de l’étape 22, le décodeur interrompt alors la restitution de la vidéo.
Lors d’une étape 23, le décodeur commande le dispositif d’affichage pour afficher une image de la vidéo VID correspondant à l’instant d’interruption Tpaus.
Selon un mode particulier de réalisation de l’invention, lors d’une étape 24, le décodeur DEC reçoit (IND TYP) une indication d’un type de données d’enrichissement à afficher. Un tel type de données d’enrichissement correspond par exemple à des données concernant des évènements passés, c’est-à-dire des évènements ayant eu lieu avant l’instant d’interruption de la vidéo, ou des évènements futurs, c’est-à-dire des évènements ayant eu lieu après l’instant d’interruption de la vidéo. L’indication du type de données d’enrichissement peut être comprise dans la requête de pause reçue lors de l’étape 22. Selon cet exemple, un bouton du dispositif de commande CMD peut être associé à chaque type de données d’enrichissement disponibles. L’indication du type des données d’enrichissement peut aussi être fournie via un menu affiché par le dispositif d’affichage suite à la requête de pause reçue lors de l’étape 22. Selon cet exemple, un menu comprenant les types de données d’enrichissement disponibles peut être affiché à l’utilisateur.
Lors d’une étape 25, le décodeur DEC détermine au moins un élément représenté sur l’image affichée lors de l’étape 23.
Pour cela, selon une première variante, le décodeur DEC analyse l’image affichée afin de détecter des visages dans l’image. Pour chaque élément (visage) détecté, le décodeur DEC compare la zone de l’image dans laquelle le visage a été détecté avec des images de référence associées à la vidéo VID. De telles images de référence sont par exemple stockées dans une mémoire du décodeur, ou dans une mémoire de la base de données ou encore dans une mémoire du serveur. Une telle comparaison permet au décodeur DEC d’obtenir ou non un identifiant de l’élément détecté dans l’image.
Selon une deuxième variante, le décodeur DEC parcourt les données d’enrichissement reçues et obtient un identifiant de chaque élément pour lequel au moins une donnée d’enrichissement est disponible à l’instant d’interruption Tpaus. Pour chaque identifiant obtenu, le décodeur DEC détermine la zone de l’image affichée dans laquelle l’élément correspondant à l’identifiant est représenté. Pour cela, le décodeur DEC obtient au moins une image de référence relatives à l’élément identifié et compare des zones de l’image affichée avec les images de référence.
Selon une variante de la deuxième variante, le flux de données codées comprend pour au moins une image du flux de données, une indication relative à la place de l’élément détecté dans l’image. Une telle indication est par exemple fournie dans un paquet de données codées de l’image en question. Le paquet de données codées comprend le nombre d’éléments identifiés dans l’image, et pour chaque élément identifié des coordonnées de la zone dans laquelle l’élément apparaît, associées à l’identifiant de l’élément. Le décodeur DEC détermine alors les éléments représentés dans l’image à partir du paquet de données codées associés à l’image affiché. A la suite de l’étape 25, le décodeur DEC a déterminé les éléments représentés dans l’image affichée. La zone de l’image affichée dans laquelle chaque élément est représenté est détectée et l’identifiant de l’élément est connu.
Lors d’une étape 26, le décodeur DEC obtient alors au moins une donnée d’enrichissement relative à chaque élément déterminé lors de l’étape 25. Une telle donnée d’enrichissement est obtenue en fonction de l’instant d’interruption Tpaus. Pour l’exemple illustré en figures 6 et 7, l’instant d’interruption Tpaus a lieu entre l’instant T1 et l’instant T2 de la lecture de la vidéo VID. Lors de l’étape 26, le décodeur DEC obtient à partir de l’instant Tpaus, le groupe de données d’enrichissement DE1 comprenant : les données d’enrichissement D11, D12 et D13 pour l’élément ELT1 et les données d’enrichissements D21 et D22 pour l’élément ELT2.
Selon le mode particulier de réalisation de l’invention dans lequel l’utilisateur a indiqué un type de données d’enrichissement lors de l’étape 24, le décodeur filtre les données d’enrichissement reçus en fonction du type indiqué par l’utilisateur. Par exemple, si l’utilisateur a indiqué un type de données d’enrichissement correspondant à des données passées, le décodeur filtre le groupe DE1 de données d’enrichissement pour ne garder que les données d’enrichissement relatives aux actions passées. Selon ce mode particulier de réalisation de l’invention, un indicateur indiquant le type de données (passé/futur) est associé à chaque donnée d’enrichissement.
Lors d’une étape 27, le décodeur DEC commande au dispositif d’affichage l’affichage des données d’enrichissement obtenues lors de l’étape 26. Les données d’enrichissement sont affichées en association avec l’élément détecté auquel elle s’applique. Un exemple est illustré par la figure 8B, dans laquelle des données d’enrichissements sont affichées en association avec les visages des personnages représentés, sous la forme de textes lisibles par l’utilisateur.
En variante, une donnée d’enrichissement peut être représentée sous une forme graphique accompagnée éventuellement d’un texte. Par exemple, lorsque des visages détectés dans l’image correspondent à deux personnages ayant un lien entre eux (par exemple un lien familial, ou amical), un trait joignant les deux visages, accompagné d’une indication de la nature du lien (parent, fils-fille, ....) peut être affiché sur l’image.
La figure 7 illustre la transmission des données d’enrichissement au décodeur DEC selon un mode particulier de réalisation de l’invention. Sur la figure 7, la séquence vidéo VID est découpée en une succession d’images (barres verticales) le long d’un axe du temps t. L’axe du temps comprend trois instants de la vidéo T1, T2, Tn pour lesquels un groupe de données d’enrichissement (DE1, DE2, DEn) a respectivement été défini. Par exemple, les groupes de données d’enrichissement correspondent aux groupes DE1, DE2 et DEn décrits en relation avec la figure 6. Le groupe DE1 de données d’enrichissement correspondant aux données d’enrichissement relatives à l’instant T1 de la vidéo est transmis de manière synchronisée avec les données codées relatives à la ou aux image(s) de la vidéo VID correspondant à l’instant T1.
De même, le groupe DE2, respectivement DEn, de données d’enrichissement correspondant aux données d’enrichissement relatives à l’instant T2, respectivement Tn, de la vidéo est transmis de manière synchronisée avec les données codées relatives à la ou aux image(s) de la vidéo VID correspondant à l’instant T2, respectivement Tn.
Lors de la génération d’un flux de transport pour transmettre les données codées de la séquence d’images au décodeur DEC, le serveur SERV insère chaque groupe de données d’enrichissement dans une composante « data » du flux de transport en association avec les données codées de la séquence d’images relatives à l’instant temporel auquel le groupe de données d’enrichissement s’applique.
Lorsque le serveur SERV génère les données du flux de transport relatives à un instant de la séquence d’images pour transmission en streaming au décodeur, le serveur obtient les données d’enrichissement en envoyant par exemple à la base de données BDE une requête de données d’enrichissement comprenant une référence à un tel instant.
Lorsque la séquence d’images est une vidéo que le décodeur DEC va télécharger (vidéo à la demande par exemple), le serveur SERV peut obtenir les données d’enrichissements pour tous les instants de la séquence d’images en une seule fois.
En variante, lorsque les données d’enrichissements ne sont pas transmises avec le flux de données codées de la séquence d’images, le décodeur DEC peut envoyer à la base de données BDE une requête de données d’enrichissement comprenant une référence à l’instant de pause de la vidéo, et éventuellement une référence à un élément représenté dans l’image affichée lors de la pause de la vidéo. En retour, la base de données BDE envoie au décodeur DEC au moins une donnée d’enrichissement déterminée en fonction de Tintant de pause, et éventuellement déterminée en fonction de la référence audit élément.
Selon une variante du mode de réalisation illustré en figure 7, le groupe de données d’enrichissement relatif à un instant Ti est transmis à intervalles réguliers pendant toute la durée de validité des données d’enrichissement du groupe. Par exemple, sur la figure 7, le groupe de données d’enrichissement DE1 est transmis toutes les 4 secondes, jusqu’à l’instant T2 pour lequel de nouvelles données d’enrichissement DE2 sont transmises. Ce mode particulier de réalisation de l’invention est particulièrement intéressant dans le cas où l’utilisateur change de chaîne au cours de la lecture de la vidéo.
En effet, lorsque l’utilisateur change de chaîne de télévision, c’est-à-dire que le décodeur bascule de la lecture d’un premier flux vidéo à un deuxième flux vidéo, si le prochain instant de transmission des données d’enrichissement relatives au deuxième flux vidéo est éloigné de l’instant où l’utilisateur va activer la pause de la lecture du deuxième flux vidéo, les données d’enrichissement dont disposera le décodeur à l’instant d’interruption correspondront aux données d’enrichissement relatives au premier flux vidéo et ne seront donc pas exploitables.
La répétition à intervalles réguliers de la transmission des données d’enrichissement permet d’obtenir des données d’enrichissement associées au flux vidéo en cours (deuxième flux vidéo) correctes et de limiter l’intervalle de temps où le décodeur ne dispose pas de ces données.
La figure 3 illustre un autre mode particulier de réalisation de l’invention.
Les éléments identifiés lors du procédé décrit en relation avec la figure 2 peuvent être sélectionnés, par exemple via le dispositif de commande CMD. Selon ce mode particulier de réalisation de l’invention, les données d’enrichissement relatives à la vidéo ont été transmises dans une étape préalable au décodeur.
Suite à l’étape 27 décrite à la figure 2, lors d’une étape 30, le décodeur reçoit une commande de sélection (SEL ELT) d’un élément détecté lors de l’étape 25.
Puis, lors d’une étape 31, le décodeur reçoit une commande de navigation (NAVIG) dans la vidéo. Par exemple, une telle commande est transmise au décodeur par le dispositif de commande lorsque l’utilisateur appuie sur un bouton d’avance rapide ou de retour rapide après la sélection d’un élément identifié dans l’image.
Lors d’une étape 32, lorsque l’utilisateur a demandé un parcours de la vidéo en retour rapide, le décodeur parcourt les données d’enrichissement stockées dans sa mémoire et sélectionne (OBT_DAT) les données d’enrichissement relatives à l’élément sélectionné et à un instant de la vidéo Tav situé avant l’instant d’interruption et pour lequel les données d’enrichissement relatives à l’élément sélectionné sont différentes des données d’enrichissement associées à l’instant d’interruption.
Lorsque l’utilisateur a demandé un parcours de la vidéo en avance rapide, le décodeur parcourt les données d’enrichissement stockées et sélectionne les données d’enrichissement relatives à l’élément sélectionné et à un instant de la vidéo Tap situé après l’instant d’interruption et pour lequel les données d’enrichissement relatives à l’élément sélectionné sont différentes des données d’enrichissement associées à l’instant d’interruption.
Lors d’une étape 33, le décodeur détermine une image de la vidéo correspondant à l’instant Tav ou Tap déterminé lors de l’étape 32. Lors de l’étape 33, le décodeur analyse l’image ainsi déterminée afin de détecter la zone de l’image dans laquelle l’élément sélectionné apparaît. Une telle détection peut être faite en comparant des zones de l’image avec des images de référence relatives à l’élément sélectionné.
Lors d’une étape 34, le décodeur commande l’affichage sur l’image déterminée des données d’enrichissement relatives à l’élément sélectionné et à l’instant Tap ou Tav de la vidéo.
Un tel mode de réalisation de l’invention permet de fournir à l’utilisateur la possibilité de sélectionner un élément représenté dans la vidéo et de naviguer parmi les images de la vidéo afin d’obtenir au moins une nouvelle donnée d’enrichissement pour cet élément.
Selon un autre mode particulier de réalisation de l’invention, lors de l’étape de détermination des données d’enrichissement pour un élément identifié en fonction de l’instant d’interruption, les données d’enrichissements sont également déterminées en fonction d’une date de restitution de la séquence d’images.
Les données d’enrichissements sont mises à jour en fonction d’évènements intervenant sur les éléments détectés ; Par exemple, la séquence d’images correspond à une image ou une suite d’images fixes ou photos personnelles d’un utilisateur. Les éléments détectés sur ces images correspondent à des personnes publiant des informations personnelles sur des réseaux sociaux.
Un serveur hébergeant le réseau social est adapté à communiquer avec la base de données BDE afin de mettre à jour les données d’enrichissement relatives à une personne identifiée sur les images lorsque cette personne publie une nouvelle information, par exemple un mariage, une naissance, etc.... Pour cela, l’élément, c’est-à-dire la personne, détecté dans les images est associé à l’identifiant de cette personne sur le réseau social.
Selon ce mode particulier de réalisation de l’invention, les données d’enrichissement affichées à l’utilisateur peuvent ainsi être mises à jour en fonction de l’occurrence d’un évènement relatif à un élément détecté. De telles données d’enrichissement sont ainsi dépendantes de la date de restitution de la séquence d’images.
Dans d’autres variantes de ce mode particulier de réalisation de l’invention, les données d’enrichissement sont stockées par un terminal de l’utilisateur et peuvent être mises à jour via l’envoi de notification d’évènements au terminal.

Claims (15)

  1. Revendications
    1. Procédé d’enrichissement d’une séquence d’images, mis en œuvre par un dispositif de traitement, ladite séquence d’images comprenant au moins une image, et étant restituée via un dispositif d’affichage, le procédé comprend les étapes suivantes : - suite à la réception (22) d’une requête de pause de la restitution de la séquence d’images, interruption de ladite restitution, - affichage (23) d’une image de la séquence d’images en fonction de l’instant d’interruption de la restitution, - détermination (25) d’au moins un élément représenté sur ladite image affichée, le procédé est caractérisé en ce qu’il comprend les étapes suivantes: - obtention (26) d’au moins une donnée d’enrichissement relative audit au moins un élément déterminé, en fonction de l’instant d’interruption de la restitution, - affichage (27) sur l'image de ladite au moins une donnée d’enrichissement en association avec ledit au moins un élément déterminé.
  2. 2. Procédé d’enrichissement selon la revendication 1, comprenant en outre la réception d’une indication d’un type de données d’enrichissement à afficher.
  3. 3. Procédé d’enrichissement selon l’une quelconque des revendications 1 à 2, dans lequel ladite au moins une donnée d’enrichissement est stockée en association avec au moins un instant temporel de la séquence d’images.
  4. 4. Procédé d’enrichissement selon la revendication 3, dans lequel lorsque la séquence d’images est reçue par le dispositif de traitement sous la forme d’un flux de données codées, ladite au moins une donnée d’enrichissement est reçue par le dispositif de traitement de manière synchronisée avec les données codées du flux de données correspondant à l’instant temporel auquel ladite donnée d’enrichissement est associée.
  5. 5. Procédé d’enrichissement selon la revendication 4, dans lequel ladite au moins une donnée d’enrichissement est comprise dans une composante dudit flux de données codées.
  6. 6. Procédé d’enrichissement selon la revendication 4 ou 5, dans lequel lorsque ladite au moins une donnée d'enrichissement est associée à un groupe d’instants temporels de la séquence d’images, ladite au moins une donnée d’enrichissement est transmise à intervalles réguliers en parallèle des données codées du flux de de données codées relatives audit groupe d’instants temporels.
  7. 7. Procédé d’enrichissement selon l’une quelconque des revendications 1 à 6, dans lequel ladite donnée d’enrichissement est obtenue à partir d’un espace de stockage du dispositif de traitement.
  8. 8. Procédé d’enrichissement selon l’une quelconque des revendications 1 à 7, dans lequel la détermination dudit au moins un élément est effectuée par comparaison d’une zone de l’image obtenue avec au moins une image de référence relative à un élément associé à une donnée d’enrichissement associée audit instant d’interruption.
  9. 9. Procédé d’enrichissement selon la revendication 1, dans lequel ladite donnée d’enrichissement est mise à jour suite à l’occurrence d’un évènement relatif à l’élément déterminé.
  10. 10. Procédé d’enrichissement selon l’une quelconque des revendications 1 à 9, comprenant en outre les étapes suivantes : - réception par le dispositif de traitement, d’une commande de sélection d’un élément détecté, - réception d'une commande de navigation dans la séquence d’images comprenant un sens de parcours des images, - obtention d’au moins une nouvelle donnée d’enrichissement associée audit élément sélectionné, à partir d’un instant de la séquence d’images situé après l’instant d’interruption selon ledit sens de parcours des images, ladite nouvelle donnée d’enrichissement obtenue étant différente de ladite donnée d’enrichissement associée audit élément sélectionné et audit instant d’interruption, - détermination d’une image de la séquence d’images correspondant à l’instant de la séquence d'images associé à la nouvelle donnée d’enrichissement et dans laquelle ledit élément sélectionné est représenté, - affichage sur l’image déterminée de ladite au moins une nouvelle donnée d’enrichissement en association avec ledit au moins un élément sélectionné.
  11. 11. Dispositif de traitement d’une séquence d’images, ladite séquence d’images comprenant au moins une image, ledit dispositif étant adapté pour: - restituer via un dispositif d’affichage ladite séquence d’images, - interrompre ladite restitution suite à la réception d’une requête de pause de la restitution de la séquence d’images, - commander l'affichage d’une image de la séquence d’images en fonction de l’instant d’interruption de la restitution, - déterminer au moins un élément représenté sur ladite image affichée, le dispositif est caractérisé en ce qu’il est également adapté pour: - obtenir au moins une donnée d’enrichissement relative audit au moins un élément déterminé, en fonction de l’instant d’interruption de la restitution, - commander au dispositif d’affichage l’affichage sur l’image obtenue de ladite au moins une donnée d’enrichissement en association avec ledit au moins un élément déterminé.
  12. 12. Terminal comprenant un dispositif de traitement selon la revendication 11.
  13. 13. Base de données d’enrichissement adaptée pour : - enregistrer au moins une donnée d’enrichissement associée à au moins un instant d’une séquence d’images, - recevoir une requête de données d’enrichissement comprenant une référence à un instant d’une séquence d’images, en provenance d’un dispositif de traitement de la séquence d’images ou d’un serveur de fourniture d’un flux de données codées relatives à la séquence d’images, - fournir audit dispositif de traitement ou audit serveur, au moins une donnée d’enrichissement déterminée en fonction de ladite référence.
  14. 14. Système d’enrichissement d’une séquence d’images comprenant : - un terminal selon la revendication 12, - une base de données d’enrichissement selon la revendication 13.
  15. 15. Programme d’ordinateur comportant des instructions de code de programme pour l'exécution des étapes du procédé d’enrichissement selon l’une quelconque des revendications 1 à 10, lorsque ledit programme est exécuté par un processeur.
FR1559176A 2015-09-29 2015-09-29 Procede et dispositif d'enrichissement d'une fonction pause de la lecture d'une sequence d'images Withdrawn FR3041852A1 (fr)

Priority Applications (1)

Application Number Priority Date Filing Date Title
FR1559176A FR3041852A1 (fr) 2015-09-29 2015-09-29 Procede et dispositif d'enrichissement d'une fonction pause de la lecture d'une sequence d'images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
FR1559176A FR3041852A1 (fr) 2015-09-29 2015-09-29 Procede et dispositif d'enrichissement d'une fonction pause de la lecture d'une sequence d'images

Publications (1)

Publication Number Publication Date
FR3041852A1 true FR3041852A1 (fr) 2017-03-31

Family

ID=55299584

Family Applications (1)

Application Number Title Priority Date Filing Date
FR1559176A Withdrawn FR3041852A1 (fr) 2015-09-29 2015-09-29 Procede et dispositif d'enrichissement d'une fonction pause de la lecture d'une sequence d'images

Country Status (1)

Country Link
FR (1) FR3041852A1 (fr)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001076249A1 (fr) * 2000-03-31 2001-10-11 United Video Properties, Inc. Systemes medias interactifs et procedes permettant de representer un contenu de temps de pause
US20100153831A1 (en) * 2008-12-16 2010-06-17 Jeffrey Beaton System and method for overlay advertising and purchasing utilizing on-line video or streaming media

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001076249A1 (fr) * 2000-03-31 2001-10-11 United Video Properties, Inc. Systemes medias interactifs et procedes permettant de representer un contenu de temps de pause
US20100153831A1 (en) * 2008-12-16 2010-06-17 Jeffrey Beaton System and method for overlay advertising and purchasing utilizing on-line video or streaming media

Similar Documents

Publication Publication Date Title
FR2883692A1 (fr) Procede d'envoi de commande a un serveur de flux de donnees numeriques et appareil implementant le procede
FR2947069A1 (fr) Procede de selection de versions d'un document parmi une pluralite de versions recues a la suite d'une recherche, et recepteur associe
EP1741294B1 (fr) Procede et dispositif de traitement automatique d'informations spontanees
EP2597886A1 (fr) Procédé de transmission de programmes de vidéo à la demande de type " Push " et décodeur associé
FR3041852A1 (fr) Procede et dispositif d'enrichissement d'une fonction pause de la lecture d'une sequence d'images
WO2017158274A1 (fr) Acquisition d'extraits d'un flux multimédia sur un terminal
FR3090256A1 (fr) Procédé de reproduction sur un terminal d’un contenu principal en restituant un contenu secondaire associé à un objet affiché, terminal, serveur, et programme d’ordinateur correspondants.
WO2023180274A1 (fr) Gestion perfectionnée d'un code visuel en cours d'affichage dans un contenu multimédia
FR3069996B1 (fr) Procede de lecture d'un flux multimedia chiffre avec acces rapide au contenu en clair et dispositif d'utilisation
WO2020183080A1 (fr) Procédé de gestion du téléchargement d'images associées à des sauts d'images susceptibles d'être realisés lors d'une lecture accelerée d'un contenu multimedia diffusé en continu
EP3548997B1 (fr) Procédé de gestion de la réception de contenus numériques par un dispositif de gestion
WO2017064400A1 (fr) Enrichissement contextuel par reconnaissance audio
FR3131160A1 (fr) Procédé de restitution d’un contenu multimédia, programme d’ordinateur et terminal lecteur de flux multimédia correspondants.
FR2889016A1 (fr) Procede de creation d'un resume d'un document en fonction de criteres introduits par l'utilisateur, et dispositif audiovisuel associe au procede
FR3131491A1 (fr) procédé de gestion de sauts temporels lors de la lecture d’un contenu multimédia.
EP3753255A1 (fr) Réception de flux représentatif d'un contenu multimédia
EP2854415B1 (fr) Procédé de transmission dynamique de données d'information relatives à un programme audio et/ou vidéo
EP4109905A1 (fr) Gestion du téléchargement progressif adaptatif d'un contenu numérique en mode économiseur d'écran
FR3116685A1 (fr) Personnalisation de flux multimédia en fonction de données dynamiques issues d’objets connectés
EP1432247A1 (fr) Procédé et dispositif de décodage et d'affichage en marche avant accélérée d'images MPEG, circuit pilote vidéo et boítier décodeur incorporant un tel dispositif
FR3113548A1 (fr) Mode de visualisation pseudo-aléatoire d’une liste de contenus télévisuels
FR2834416A1 (fr) Procede de diffusion de services audiovisuels, central de diffusion et support d'enregistrement, procede de visualisation d'emissions audiovisuelles et dispositif associes
FR2988255A1 (fr) Procede de teletransmission d'un ensemble de donnees depuis un dispositif emetteur a destination d'au moins un dispositif destinataire, dispositifs emetteur et destinataire associes.
WO2013135976A1 (fr) Procédé de télétransmission d'un ensemble de données depuis un dispositif émetteur à destination d'au moins un dispositif destinataire, dispositifs émetteur et destinataire associés
FR2973537A1 (fr) Procede et dispositif d'acces a un contenu diffuse enregistre

Legal Events

Date Code Title Description
PLSC Publication of the preliminary search report

Effective date: 20170331

ST Notification of lapse

Effective date: 20170531