WO2023180274A1 - Gestion perfectionnée d'un code visuel en cours d'affichage dans un contenu multimédia - Google Patents

Gestion perfectionnée d'un code visuel en cours d'affichage dans un contenu multimédia Download PDF

Info

Publication number
WO2023180274A1
WO2023180274A1 PCT/EP2023/057128 EP2023057128W WO2023180274A1 WO 2023180274 A1 WO2023180274 A1 WO 2023180274A1 EP 2023057128 W EP2023057128 W EP 2023057128W WO 2023180274 A1 WO2023180274 A1 WO 2023180274A1
Authority
WO
WIPO (PCT)
Prior art keywords
visual code
screen
data associated
request
multimedia content
Prior art date
Application number
PCT/EP2023/057128
Other languages
English (en)
Inventor
Patrick KIRSCHBAUM
Halim Bendiabdallah
Original Assignee
Orange
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Orange filed Critical Orange
Publication of WO2023180274A1 publication Critical patent/WO2023180274A1/fr

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/60—Context-dependent security
    • H04W12/69—Identity-dependent
    • H04W12/77—Graphical identity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4221—Dedicated function buttons, e.g. for the control of an EPG, subtitles, aspect ratio, picture-in-picture or teletext
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43079—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on multiple devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/12—Messaging; Mailboxes; Announcements
    • H04W4/14—Short messaging services, e.g. short message services [SMS] or unstructured supplementary service data [USSD]

Definitions

  • the present disclosure relates to the field of transmission of data associated with a visual code appearing at least temporarily in multimedia content.
  • Such a visual code can for example be of the one or two-dimensional barcode type, also referred to as “QR code” for “quick response code”.
  • Such codes may be present temporarily in multimedia content, such as a television program currently being broadcast.
  • Optical reading of such a code for example using a smartphone type terminal, usually makes it possible to retrieve from the smartphone information relating to a service associated with this code (for example after activation of a hypertext link displayed on the smartphone).
  • certain television programs display a 2D QR code type to access information from a mobile terminal.
  • the duration of display of this code is of the order of a few seconds at most.
  • This disclosure improves the situation.
  • a method for transmitting data associated with a visual code appearing at least temporarily in multimedia content being played on a connected screen comprising: - establish a pairing between the screen and at least one second connected terminal, distinct from the connected screen, - at least during the reading of the multimedia content comprising said code, provide a user of the screen with a man/machine interface connected to the screen to issue a request for data associated with the visual code, and - upon receipt of the request for data associated with the visual code from the connected screen, implement a transmission of said data associated with the visual code to the second connected terminal, the visual code appearing at a given time stamp after the multimedia content has started to play, a request for data associated with the visual code, coming from the connected screen, is interpreted as associated with said visual code if the request is received within a predefined time range after said given timestamp.
  • the user only has to activate the man/machine interface connected to the screen (for example a television remote control with a specific button) to launch a request for data associated with the code visual display currently being displayed by the screen, and, thus, the user's second terminal (for example a smartphone separate from the television screen) receives this data, without disturbing the current playback of the multimedia content, nor disturb the user during this reading.
  • the man/machine interface connected to the screen for example a television remote control with a specific button
  • such a time range can take into account user reaction latency and extend over a minute or more for example.
  • the screen can be connected to a remote server to receive and play multimedia content, and: - the connected screen transmits to this remote server the request for data associated with the visual code, and, - pairing data being stored in the memory of the remote server, the remote server identifies, based on this pairing data, the second terminal as the recipient of the data associated with the visual code.
  • the second terminal can receive (for example by SMS or other messaging means) the data associated with the visual code.
  • the connected screen can transmit to the second terminal this data which it has previously acquired from the server, for example via a local network operated by a gateway and to which both the second terminal and the screen are connected. connected.
  • This alternative realization is described in detail below.
  • the second terminal receives this data in the form of an access link to a service associated with the visual code (for example a hypertext link, html type or others).
  • a service associated with the visual code for example a hypertext link, html type or others.
  • the multimedia content is received by the connected screen by implementing a broadcast protocol.
  • this content can typically be a television program for example.
  • the broadcast protocol can for example be of the HBBTV type (for “Hybrid Broadcast Broadband TV”), for example over IP.
  • HBBTV Hybrid Broadcast Broadband TV
  • IP IP
  • the visual code is typically a bar code (one or two dimensions) whose optical reading usually makes it possible to recover the data associated with the visual code, this data being associated with a service accessible via the second terminal (for example via a hyperlink).
  • the man/machine interface uses a means distinct from conventional optical reading to request the data associated with the visual code.
  • the man/machine interface may include a remote control comprising a specific button, pressing this specific button causing the transmission of the request for data associated with the visual code.
  • the man/machine interface may include a voice recognition module (and more particularly speech recognition), and a pronunciation of at least one specific keyword (or a predefined succession of specific keywords) by the user causes the request for data associated with the visual code to be transmitted.
  • a voice recognition module and more particularly speech recognition
  • a pronunciation of at least one specific keyword or a predefined succession of specific keywords
  • the connected screen can be integrated into a connected television, and the man/machine interface available to the user can then include a television remote control, this remote control comprising a button specific to issue the request for data associated with the visual code.
  • the screen can also be connected to a content reception terminal, of the set-top box type, and the man/machine interface available to the user can include a remote control of the set-top terminal. top box, this remote control then comprising the aforementioned specific button to issue the request for said data associated with the visual code.
  • the present disclosure also relates to a connected screen, configured to display multimedia content in which a visual code appears at least temporarily, the screen comprising: - a first communication interface with a man/machine interface to receive a command to receive data associated with the visual code, and - a second communication interface with a remote server for transmitting to the remote server a request for said data associated with the visual code, the visual code appearing at a given time stamp after the multimedia content has started to play, a request for data associated with the visual code, coming from the connected screen, is interpreted as associated with said visual code if the request is received within a predefined time range after said given timestamp.
  • the present disclosure also targets a system comprising at least one such connected screen and a man/machine interface, for implementing the method defined above.
  • the aforementioned man/machine interface can then include a remote control comprising a specific button to issue the request for said data associated with the visual code.
  • a specific button can be provided on a computer keyboard connected to the aforementioned screen.
  • a computer program comprising instructions for implementing the method as defined herein when this program is executed by a processor.
  • a non-transitory recording medium readable by a processor, on which such a program is recorded is provided.
  • FIG. 1 illustrates a processing circuit comprising a processor, for example a server capable of implementing the method illustrated in the , according to an exemplary embodiment.
  • An ECR connected screen is connected via an extended network NET to a SER server capable of delivering CM multimedia content which can be displayed on the ECR connected screen.
  • a visual CB code such as a QRC barcode appears in the content and the ECR screen then displays this CB code.
  • a user UT viewing the multimedia content on the ECR screen has a remote control RC comprising in particular a specific button BC. Pressing this button BC causes the emission of a remote control signal (for example infrared) received by a receiver RRC of the connected screen and interpreted by the connected screen ECR as being a request from the user UT to receive data associated with this visual code CB.
  • a remote control signal for example infrared
  • the ECR connected screen is part of a connected television, capable of communicating directly with the remote server SER.
  • the ECR screen can be connected to an STB terminal for receiving video streams, of the set-top box type for example.
  • This STB terminal (represented by dotted lines in this variant) can itself be connected to the SER server, for example via a gateway of a GW local network.
  • the RC remote control controls the operation of the STB terminal (for example to change the broadcast channels, turn up the sound, etc.) and the STB terminal has for this purpose a receiver RRC' to receive the signals from the remote control, and in particular the data request signal associated with the visual code CB, which follows pressing the specific button BC on the remote control.
  • pressing the BC button allows a request to be sent to the SER server, provider of the CM content currently being broadcast, via a connection according to the HBBTV protocol for example (for “Hybrid Broadcast Broadband TV”) over IP for example.
  • the content provider server SER sends a notification (by SMS or other) to at least a second connected terminal, for example the smartphone of the user SM, with for example in the notification data from a link allowing the UT user to have access to a service associated with the CB code (the link giving for example access to a web page presenting such a service).
  • the second terminal SM can receive this data from the server, the user UT first registers, with the content provider server SER, one or more IDSM numbers of smartphone(s) in association with an IDTV identifier of his connected television (this identifier could be for example an email address, an IP address or other).
  • This registration can be done directly on the television user's customer account, online on the content provider's customer account or even on the Internet service provider's GW box.
  • the server for example stores in memory at least one pairing data between a connected screen identifier and an identifier of the second terminal SM (for example an MSISDN number ).
  • the server then broadcasts multimedia content CM from a known timestamp.
  • This broadcast can be carried out using the HBBTV protocol (for example over IP), which makes it possible to add metadata to the broadcast stream, in particular temporal metadata.
  • the instant of start of broadcast of the content can be known in particular from the connected screen, as well as a possible instant of appearance of a visual code in the images of the content.
  • the connected screen (or the set-top box device) can read this metadata and in particular determine whether such visual code is or will soon be present in the images of the content. If necessary, the connected screen can then open a time range in step S4 which begins for example at the expected time of appearance of the visual code in the multimedia content.
  • This time window can take into account user reaction latency and close well after the code appears, for example a few minutes later.
  • Such an embodiment allows the user to have time to react by pressing the specific remote control button to obtain the data associated with the visual code.
  • this temporal range can be opened to listen to a specific succession of keywords (for example "access to this service") that the user could pronounce to access the data associated with this visual code, in an embodiment where the interface man-machine is a voice interface.
  • the operation of the connected screen is not disturbed if the user pronounces such keywords in a different context, outside this time range.
  • the connected screen can report all requests, for example if a press on the specific button on the remote control has been detected.
  • the server for its part can open the aforementioned time window when a visual code is determined to appear in the images of multimedia content being broadcast. Then, the server processes these requests if they arrive within this time window, or ignores them otherwise.
  • the previous embodiment according to which the connected screen itself filters the requests, may be preferred so as not to overload the NET network or the SER server.
  • the server when the server receives such a request in step S5, the server can consult in its memory the pairing data between the connected screen which transmits this request and the second terminal to which it must send the data of the access link to the service associated with the code which has just been broadcast.
  • the request can contain for example: - information on the program currently being broadcast (for example a particular television channel among a group of channels), allowing the server to identify the visual code which has been inserted in this program, - a current timestamp at which the user pressed the specific remote control button, which can allow the server to confirm that this timestamp is indeed compatible with the planned moment of broadcast of the visual code in the given program, and that this timestamp is indeed in a current time range, - and at least one connected screen identifier (or set-top box device, or gateway) such as an IP address, or an account address (email address or customer account number for the content distribution service , or other), which allows the server to find in its memory, in step S6, the coordinates of the second terminal SM.
  • - information on the program currently being broadcast for example a particular television channel among a group of channels
  • a current timestamp at which the user pressed the specific remote control button which can allow the server to confirm that this timestamp is indeed compatible with the planned moment of broadcast of the
  • step S7 the server then sends the data associated with the visual code to the second terminal, in a message addressed according to the IDSM coordinates of this second terminal according to the contents of its memory.
  • the server can store several smartphone-type terminal identifiers and send this data to a plurality of terminals.
  • the choice of at least one terminal to which to send the notification can be left to the user.
  • a choice can be offered to the user by inlay in the current display on the screen in order to let the user select the second terminals to which he wishes that the link notification is sent (for example: all, or smartphone number 1 (possibly a "pseudo" type identifier), smartphone number 2 (or nickname), etc.) in order to receive the link notification on all terminals or only on selected terminals.
  • the server can carry out the steps illustrated S1 to S7.
  • the server that can include, as illustrated in the , a COM communication interface with a NET extended network, as well as a PROC processor and a MEM storage memory to store pairing data in particular.
  • this MEM memory also stores the instruction data of a computer program for implementing the method according to the , when the PROC processor reads and executes these instructions.
  • the connected screen can temporarily store metadata of the HBBTV stream which can typically include data from the service access link associated with the visual code currently displayed.
  • the connected screen finds this link data in its temporary memory and transmits it itself to the second terminal, without going through the content server, for example via a gateway GW of a local network to which the ECR screen and the second terminal are connected (for example by wifi connection).
  • this specific button can also be provided on a computer keyboard (physical or tactile), this keyboard being connected to a screen (computer, tablet, television or other).

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Pour une transmission de données associées à un code visuel apparaissant au moins temporairement dans un contenu multimédia en cours de lecture sur un écran connecté, on prévoit de: - établir un appairage (IDTV, IDSM) entre l'écran (ECR) et au moins un deuxième terminal connecté (SM), distinct de l'écran connecté (ECR), - au moins pendant la lecture du contenu multimédia comportant le code visuel, mettre à disposition d'un utilisateur de l'écran une interface homme/machine (RC) connectée à l'écran pour émettre une requête des données associées au code visuel, et - sur réception de la requête des données associées au code visuel auprès de l'écran connecté, mettre en œuvre une transmission desdites données associées au code visuel à destination du deuxième terminal connecté (SM), le code visuel apparaissant à une horodate donnée après un début de lecture du contenu multimédia, une requête des données associées au code visuel, issue de l'écran connecté, est interprétée comme associée audit code visuel si la requête est reçue dans une plage temporelle prédéfinie après ladite horodate donnée.

Description

Gestion perfectionnée d’un code visuel en cours d’affichage dans un contenu multimédia
La présente divulgation relève du domaine de la transmission de données associées à un code visuel apparaissant au moins temporairement dans un contenu multimédia.
Un tel code visuel peut être par exemple de type code-barres à une ou deux dimensions, aussi désigné sous le vocable « QR code » pour « quick response code ».
De tels codes peuvent être présents temporairement dans un contenu multimédia, tel qu’un programme de télévision en cours de diffusion. Une lecture optique d’un tel code, par exemple à l’aide d’un terminal de type smartphone, permet habituellement de récupérer sur le smartphone des informations relatives à un service associé à ce code (par exemple après activation d’un lien hypertexte s’affichant sur le smartphone).
Ainsi, certains programmes de télévision affichent un code 2D de type QR code pour avoir accès à de l'information à partir d’un terminal mobile. Parfois, la durée d’affichage de ce code est de l’ordre de quelques secondes tout au plus.
Un téléspectateur doit alors prendre une photo avec une application de lecture de code à barres à l'aide de son smartphone.
Or, tous les téléspectateurs n'ont pas forcément cette application sur leur smartphone, ou encore leur smartphone à portée de main lorsqu’ils regardent leur télévision, ou encore certains ne sont pas très à l'aise avec cette manipulation.
Par ailleurs, une telle manipulation implique de se lever et de se rapprocher de l'écran de télévision pendant la diffusion du programme afin de saisir correctement le code visuel avec son smartphone et parfois la durée d’affichage du code n’est pas suffisante pour réaliser cette opération avec succès.
Résumé
La présente divulgation vient améliorer la situation.
Il est proposé un procédé de transmission de données associées à un code visuel apparaissant au moins temporairement dans un contenu multimédia en cours de lecture sur un écran connecté, le procédé comportant :
- établir un appairage entre l’écran et au moins un deuxième terminal connecté, distinct de l’écran connecté,
- au moins pendant la lecture du contenu multimédia comportant ledit code, mettre à disposition d’un utilisateur de l’écran une interface homme/machine connectée à l’écran pour émettre une requête des données associées au code visuel, et
- sur réception de la requête des données associées au code visuel auprès de l’écran connecté, mettre en œuvre une transmission desdites données associées au code visuel à destination du deuxième terminal connecté,
le code visuel apparaissant à une horodate donnée après un début de lecture du contenu multimédia, une requête des données associées au code visuel, issue de l’écran connecté, est interprétée comme associée audit code visuel si la requête est reçue dans une plage temporelle prédéfinie après ladite horodate donnée.
Ainsi, dans une telle réalisation, l’utilisateur n’a à activer que l’interface homme/machine connectée à l’écran (par exemple une télécommande d’une télévision avec un bouton spécifique) pour lancer une requête de données associées au code visuel en cours d’affichage par l’écran, et, ainsi, le deuxième terminal de l’utilisateur (par exemple un smartphone distinct de l’écran de télévision) reçoit ces données, sans perturber la lecture en cours du contenu multimédia, ni déranger l’utilisateur pendant cette lecture.
Avantageusement, une telle plage temporelle peut prendre en compte une latence de réaction de l’utilisateur et s’étendre sur une minute ou plus par exemple.
Par exemple dans une réalisation, l’écran peut être connecté à un serveur distant pour recevoir et lire le contenu multimédia, et :
- l’écran connecté transmet à ce serveur distant la requête des données associées au code visuel, et,
- une donnée d’appairage étant stockée en mémoire du serveur distant, le serveur distant identifie, en fonction de cette donnée d’appairage, le deuxième terminal en tant que destinataire des données associées au code visuel.
Ainsi, le deuxième terminal peut recevoir (par exemple par SMS ou autre moyen de messagerie) les données associées au code visuel.
Alternativement à une telle réalisation, l’écran connecté peut transmettre au deuxième terminal ces données qu’il a préalablement acquises du serveur, par exemple via un réseau local animé par une passerelle et auquel sont connectés à la fois le deuxième terminal et l’écran connecté. Cette réalisation alternative est décrite en détails plus loin.
Par exemple, le deuxième terminal reçoit ces données sous la forme d’un lien d’accès à un service associé au code visuel (par exemple un lien hypertexte, type html ou autres).
Dans un exemple de réalisation, le contenu multimédia est reçu par l’écran connecté par la mise en œuvre d’un protocole de diffusion. Ainsi, ce contenu peut être typiquement un programme de télévision par exemple.
Le protocole de diffusion peut être par exemple de type HBBTV (pour « Hybrid Broadcast Broadband TV »), par exemple sur IP. Un tel protocole notamment offre l’avantage d’inclure dans le flux de données d’images de télévision des métadonnées descriptives d’évènements dans le flux, comme par exemple l’apparition prévue du code visuel précité, avec notamment une horodate prévue pour une telle apparition.
Dans une réalisation, le code visuel est typiquement un code-barres (à une ou deux dimensions) dont une lecture optique permet habituellement de récupérer les données associées au code visuel, ces données étant associées à un service accessible via le deuxième terminal (par exemple via un lien hypertexte). Néanmoins, dans la présente divulgation, l’interface homme/machine utilise un moyen distinct d’une lecture optique conventionnelle pour requérir les données associées au code visuel.
Par exemple, l’interface homme/machine peut comporter une télécommande comprenant un bouton spécifique, un appui sur ce bouton spécifique provoquant la transmission de la requête des données associées au code visuel.
Alternativement ou en complément, l’interface homme/machine peut comporter un module de reconnaissance vocale (et plus particulièrement de parole), et une prononciation d’au moins un mot-clé spécifique (ou une succession prédéfinie de mots-clés spécifiques) par l’utilisateur provoque la transmission de la requête des données associées au code visuel.
Dans le cas d’un bouton de télécommande spécifique, l’écran connecté peut être intégré à une télévision connectée, et l’interface homme/machine à disposition de l’utilisateur peut alors comporter une télécommande de la télévision, cette télécommande comportant un bouton spécifique pour émettre la requête des données associées au code visuel.
En complément ou en variante, l’écran peut être connecté en outre à un terminal de réception de contenus, de type set-top box, et l’interface homme/machine à disposition de l’utilisateur peut comporter une télécommande du terminal set-top box, cette télécommande comportant alors le bouton spécifique précité pour émettre la requête desdites données associées au code visuel.
La présente divulgation vise aussi un écran connecté, configuré pour afficher un contenu multimédia dans lequel un code visuel apparait au moins temporairement, l’écran comportant :
- une première interface de communication avec une interface homme/machine pour recevoir une commande de réception de données associées au code visuel, et
- une deuxième interface de communication avec un serveur distant pour transmettre au serveur distant une requête desdites données associées au code visuel,
le code visuel apparaissant à une horodate donnée après un début de lecture du contenu multimédia, une requête des données associées au code visuel, issue de l’écran connecté, est interprétée comme associée audit code visuel si la requête est reçue dans une plage temporelle prédéfinie après ladite horodate donnée.
La présente divulgation vise aussi un système comprenant au moins un tel écran connecté et une interface homme/machine, pour la mise en œuvre du procédé défini ci-avant.
Dans un tel système, l’interface homme/machine précitée peut alors comporter une télécommande comprenant un bouton spécifique pour émettre la requête desdites données associées au code visuel.
Néanmoins, une telle réalisation est optionnelle et en variante de prévoir une télécommande ayant un bouton spécifique, il peut être prévu un bouton spécifique sur un clavier informatique connecté à l’écran précité.
Selon un autre aspect, il est proposé un programme informatique comportant des instructions pour la mise en œuvre du procédé tel que défini dans les présentes lorsque ce programme est exécuté par un processeur. Selon un autre aspect, il est proposé un support d’enregistrement non transitoire, lisible par un processeur, sur lequel est enregistré un tel programme.
D’autres caractéristiques, détails et avantages apparaîtront à la lecture de la description détaillée ci-après, et à l’analyse des dessins annexés, sur lesquels :
Fig. 1
illustre un exemple de système pour la mise en œuvre du procédé ci-avant, selon un mode de réalisation.
Fig. 2
illustre les étapes principales d’un exemple de procédé selon un mode de réalisation.
Fig. 3
illustre un circuit de traitement comportant un processeur, par exemple d’un serveur susceptible de mettre en œuvre le procédé illustré sur la , selon un exemple de réalisation.
Il est maintenant fait référence à la . Un écran connecté ECR est relié via un réseau étendu NET à un serveur SER propre à délivrer des contenus multimédia CM qui peuvent s'afficher sur l'écran connecté ECR. A un instant prédéfini de diffusion du contenu multimédia, un code visuel CB tel qu'un code-barres QRC apparaît dans le contenu et l'écran ECR affiche alors ce code CB. Un utilisateur UT visualisant le contenu multimédia sur l'écran ECR dispose d'une télécommande RC comportant en particulier un bouton spécifique BC. Un appui sur ce bouton BC provoque l'émission d'un signal de télécommande (par exemple infrarouge) reçu par un récepteur RRC de l'écran connecté et interprété par l'écran connecté ECR comme étant une requête de l'utilisateur UT pour recevoir des données associées à ce code visuel CB.
Dans l'exemple illustré en traits pleins de la , l’écran connecté ECR fait partie d’une télévision connectée, capable de communiquer directement avec le serveur distant SER.
En variante, l’écran ECR peut être connecté à un terminal STB de réception de flux vidéo, de type set-top box par exemple. Ce terminal STB (représenté par des traits pointillés dans cette variante) peut être connecté lui-même au serveur SER par exemple via une passerelle d’un réseau local GW. Dans cette variante, la télécommande RC pilote le fonctionnement du terminal STB (par exemple pour changer les chaînes de diffusion, monter le son, etc.) et le terminal STB dispose à cet effet d’un récepteur RRC’ pour recevoir les signaux de la télécommande, et notamment le signal de requête de données associées au code visuel CB, qui fait suite à l'appui sur le bouton spécifique BC de la télécommande.
Dans l’une ou l’autre de ces réalisations, l’appui sur le bouton BC permet l’envoi d’une requête au serveur SER, fournisseur du contenu CM en cours de diffusion, via une liaison selon le protocole HBBTV par exemple (pour « Hybrid Broadcast Broadband TV ») sur IP par exemple. Sur réception de cette requête, le serveur fournisseur de contenu SER envoie une notification (par SMS ou autre) à au moins un deuxième terminal connecté, par exemple le smartphone de l’utilisateur SM, avec par exemple dans la notification des données d’un lien permettant à l’utilisateur UT d'avoir accès à un service associé au code CB (le lien donnant par exemple accès à une page web présentant un tel service).
Afin que le deuxième terminal SM puisse recevoir ces données du serveur, l’utilisateur UT enregistre au préalable, auprès du serveur SER fournisseur de contenu, un ou plusieurs numéros IDSM de smartphone(s) en association avec un identifiant IDTV de sa télévision connectée (cet identifiant pouvant être par exemple une adresse email, une adresse IP ou autre). Cette inscription peut se faire directement sur le compte client de l’utilisateur de la télévision, en ligne sur le compte client du fournisseur de contenu ou encore sur le boîtier GW du fournisseur d'accès à Internet.
Ainsi, en référence maintenant à la , dans l'exemple représenté, au cours d’une première étape S1, le serveur par exemple stocke en mémoire au moins une donnée d'appairage entre un identifiant d'écran connecté et un identifiant du deuxième terminal SM (par exemple un numéro MSISDN). Au cours d’une étape courante S2, le serveur diffuse ensuite un contenu multimédia CM à partir d'une horodate connue. Cette diffusion peut s'effectuer selon le protocole HBBTV (par exemple sur IP), qui permet de rajouter des métadonnées dans le flux de diffusion, notamment des métadonnées temporelles. Ainsi, l'instant de début de diffusion du contenu peut être connu notamment de l’écran connecté, ainsi qu’un instant éventuel d'apparition d’un code visuel dans les images du contenu. A l'étape S3, l'écran connecté (ou le dispositif set-top box) peut lire ces métadonnées et notamment déterminer si un tel code visuel est ou va être bientôt présent dans les images du contenu. Le cas échéant, l'écran connecté peut alors ouvrir une plage temporelle à l’étape S4 qui débute par exemple à l'instant d'apparition prévu du code visuel dans le contenu multimédia.
Cette plage temporelle peut tenir compte d’une latence de réaction de l'utilisateur et se fermer bien après l'apparition du code, par exemple quelques minutes après. Une telle réalisation permet à l'utilisateur d’avoir le temps de réagir en pressant le bouton spécifique de télécommande pour obtenir les données associées au code visuel.
Alternativement, cette plage temporelle peut être ouverte pour écouter une succession spécifique de mots-clés (par exemple « accès à ce service ») que pourrait prononcer l'utilisateur pour accéder aux données associées à ce code visuel, dans une réalisation où l'interface homme-machine est une interface vocale. Avantageusement dans cette réalisation, le fonctionnement de l'écran connecté n'est pas perturbé si l'utilisateur prononce de tels mots-clés dans un contexte différent, en dehors de cette plage temporelle.
Bien entendu, dans une variante encore, l'écran connecté peut remonter toutes les requêtes, par exemple si un appui sur le bouton spécifique de la télécommande a été détecté. Le serveur de son côté peut ouvrir la fenêtre temporelle précité lorsqu’un code visuel est déterminé comme devant apparaitre dans les images d'un contenu multimédia en cours de diffusion. Ensuite, le serveur traite ces requêtes si elles parviennent dans cette fenêtre temporelle, ou les ignore sinon.
Bien entendu, la réalisation précédente, selon laquelle l'écran connecté filtre lui-même les requêtes, peut être préférée pour ne pas surcharger le réseau NET ou le serveur SER.
Dans l'une quelconque de ces réalisations, lorsque le serveur reçoit une telle requête à l'étape S5, le serveur peut consulter dans sa mémoire la donnée d'appairage entre l'écran connecté qui transmet cette requête et le deuxième terminal auquel il doit envoyer les données du lien d'accès au service associé au code qui vient d'être diffusé.
Avantageusement, la requête peut contenir par exemple :
- une information sur le programme en cours de diffusion (par exemple une chaine de télévision particulière parmi un groupe de chaines), permettant au serveur d’identifier le code visuel qui a été inséré dans ce programme,
- une horodate courante à laquelle l'utilisateur a pressé le bouton spécifique de télécommande, ce qui peut permettre au serveur de confirmer que cette horodate est bien compatible à l’instant prévu de diffusion du code visuel dans le programme donné, et que cette horodate est bien dans une plage temporelle en cours,
- et au moins un identifiant d’écran connecté (ou de dispositif set-top box, ou de passerelle) tel qu’une adresse IP, ou encore une adresse de compte (adresse email ou numéro de compte client au service de diffusion de contenu, ou autre), ce qui permet au serveur de retrouver dans sa mémoire, à l’étape S6, les coordonnées du deuxième terminal SM.
A l’étape S7, le serveur envoie alors les données associées au code visuel au deuxième terminal, dans un message adressé selon les coordonnées IDSM de ce deuxième terminal d’après le contenu de sa mémoire. Bien entendu, le serveur peut stocker plusieurs identifiants de terminaux de type smartphone et envoyer ces données à une pluralité de terminaux.
En outre, le choix d’au moins un terminal auquel envoyer la notification peut être laissé à l’utilisateur. Par exemple sur action de l’interface homme machine (télécommande ou vocale), un choix peut être proposé à l’utilisateur par incrustation dans l’affichage en cours sur l’écran afin de laisser l’utilisateur sélectionner les deuxièmes terminaux auxquels il souhaite que la notification du lien soit envoyée (par exemple : tous, ou numéro de smartphone 1 (éventuellement un identifiant de type « pseudo »), numéro de smartphone 2 (ou pseudo), etc.) afin de recevoir la notification du lien sur tous les terminaux ou uniquement sur les terminaux sélectionnés.
Dans cet exemple de la , le serveur peut réaliser les étapes illustrées S1 à S7. A cet effet, le serveur que peut comporter, comme illustré sur la , une interface de communication COM avec un réseau étendu NET, ainsi qu'un processeur PROC et une mémoire de stockage MEM pour stocker notamment les données d'appairage. Dans un exemple de réalisation, cette mémoire MEM stocke aussi les données d’instructions d’un programme informatique pour la mise en œuvre du procédé selon la , lorsque le processeur PROC lit et exécute ces instructions.
Néanmoins, le mode de réalisation selon lequel le procédé de la est réalisé par un serveur admet des variantes possibles. Par exemple, l'écran connecté peut stocker temporairement des métadonnées du flux HBBTV qui peuvent comporter typiquement les données du lien d'accès au service associé au code visuel en cours d’affichage. Sur détection de l'appui sur le bouton spécifique de la télécommande, l’écran connecté retrouve dans sa mémoire temporaire ces données de lien et les transmet lui-même au deuxième terminal, sans passer par le serveur de contenu, par exemple via une passerelle GW d’un réseau local à laquelle sont connectés l’écran ECR et le deuxième terminal (par exemple par liaison wifi).
Par ailleurs, on a décrit ci-avant un bouton spécifique de télécommande de télévision connectée ou de dispositif de type set-top box. Néanmoins, ce bouton spécifique peut être prévu également sur un clavier d'ordinateur (physique ou tactile), ce clavier étant connecté à un écran (d’ordinateur, de tablette, de télévision ou autre).

Claims (13)

  1. Procédé de transmission de données associées à un code visuel apparaissant au moins temporairement dans un contenu multimédia en cours de lecture sur un écran connecté, le procédé comportant :
    - établir un appairage entre l’écran et au moins un deuxième terminal connecté, distinct de l’écran connecté,
    - au moins pendant la lecture du contenu multimédia comportant ledit code, mettre à disposition d’un utilisateur de l’écran une interface homme/machine connectée à l’écran pour émettre une requête des données associées au code visuel, et
    - sur réception de la requête des données associées au code visuel auprès de l’écran connecté, mettre en œuvre une transmission desdites données associées au code visuel à destination du deuxième terminal connecté
    le code visuel apparaissant à une horodate donnée après un début de lecture du contenu multimédia, une requête des données associées au code visuel, issue de l’écran connecté, est interprétée comme associée audit code visuel si la requête est reçue dans une plage temporelle prédéfinie après ladite horodate donnée.
  2. Procédé selon la revendication 1, dans lequel, l’écran étant connecté à un serveur distant pour recevoir et lire ledit contenu multimédia :
    - l’écran connecté transmet audit serveur distant la requête des données associées au code visuel, et,
    - une donnée dudit appairage étant stockée en mémoire du serveur distant, le serveur distant identifie, en fonction de ladite donnée d’appairage, le deuxième terminal en tant que destinataire des données associées au code visuel.
  3. Procédé selon l’une des revendications précédentes, dans lequel le deuxième terminal reçoit lesdites données sous la forme d’un lien d’accès à un service associé au code visuel.
  4. Procédé selon l'une des revendications précédentes, dans lequel le contenu multimédia est reçu par l’écran connecté par mise en œuvre d’un protocole de diffusion.
  5. Procédé selon l’une des revendications précédentes, dans lequel le code visuel comporte un code-barres dont une lecture optique permet de récupérer lesdites données associées au code visuel, lesdites données étant associées à un service accessible via le deuxième terminal, et dans lequel l’interface homme/machine utilise un moyen distinct d’une lecture optique pour requérir lesdites données associées au code visuel.
  6. Procédé selon l'une des revendications précédentes, dans lequel l’interface homme/machine comporte une télécommande comprenant un bouton spécifique, un appui sur ledit bouton spécifique provoquant la transmission de ladite requête des données associées au code visuel.
  7. Procédé selon l'une des revendications précédentes, dans lequel l’interface homme/machine comporte un module de reconnaissance de parole, une prononciation d’au moins un mot-clé spécifique par l’utilisateur provoquant la transmission de ladite requête des données associées au code visuel.
  8. Procédé selon l'une des revendications précédentes, dans lequel, l’écran connecté étant intégré à une télévision connectée, l’interface homme/machine à disposition de l’utilisateur comporte une télécommande de la télévision, ladite télécommande comportant un bouton spécifique pour émettre la requête desdites données associées au code visuel.
  9. Procédé selon l'une des revendications précédentes, dans lequel, l’écran étant connecté à un terminal de réception de contenus, de type set-top box, l’interface homme/machine à disposition de l’utilisateur comporte une télécommande du terminal set-top box, ladite télécommande comportant un bouton spécifique pour émettre la requête desdites données associées au code visuel.
  10. Programme informatique comportant des instructions pour la mise en œuvre d’un procédé selon l’une des revendications précédentes, lorsque ce programme est exécuté par un processeur.
  11. Ecran connecté, configuré pour afficher un contenu multimédia dans lequel un code visuel apparait au moins temporairement, l’écran comportant :
    - une première interface de communication (RRC ; RRC’, STB) avec une interface homme/machine (RC) pour recevoir une commande de réception de données associées au code visuel, et
    - une deuxième interface de communication avec un serveur distant (SER) pour transmettre au serveur distant une requête desdites données associées au code visuel,
    le code visuel apparaissant à une horodate donnée après un début de lecture du contenu multimédia, une requête des données associées au code visuel, issue de l’écran connecté, est interprétée comme associée audit code visuel si la requête est reçue dans une plage temporelle prédéfinie après ladite horodate donnée.
  12. Système comportant au moins un écran connecté selon la revendication 11 et une interface homme/machine, pour la mise en œuvre du procédé selon l’une des revendications 1 à 9.
  13. Système selon la revendication 12, dans lequel l’interface homme/machine comporte une télécommande comprenant un bouton spécifique pour émettre la requête desdites données associées au code visuel.
PCT/EP2023/057128 2022-03-23 2023-03-21 Gestion perfectionnée d'un code visuel en cours d'affichage dans un contenu multimédia WO2023180274A1 (fr)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR2202564A FR3133964A1 (fr) 2022-03-23 2022-03-23 Gestion perfectionnée d’un code visuel en cours d’affichage dans un contenu multimédia
FRFR2202564 2022-03-23

Publications (1)

Publication Number Publication Date
WO2023180274A1 true WO2023180274A1 (fr) 2023-09-28

Family

ID=82100100

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2023/057128 WO2023180274A1 (fr) 2022-03-23 2023-03-21 Gestion perfectionnée d'un code visuel en cours d'affichage dans un contenu multimédia

Country Status (2)

Country Link
FR (1) FR3133964A1 (fr)
WO (1) WO2023180274A1 (fr)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012120524A2 (fr) * 2011-03-09 2012-09-13 Tata Consultancy Services Limited Procédé et système pour la mise en œuvre d'une application de télévision interactive
JP2015204501A (ja) * 2014-04-11 2015-11-16 船井電機株式会社 テレビジョン
US20200322689A1 (en) * 2017-12-20 2020-10-08 Juhaokan Technology Co., Ltd. Method For Processing Television Screenshot, Smart Television, And Storage Medium

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012120524A2 (fr) * 2011-03-09 2012-09-13 Tata Consultancy Services Limited Procédé et système pour la mise en œuvre d'une application de télévision interactive
JP2015204501A (ja) * 2014-04-11 2015-11-16 船井電機株式会社 テレビジョン
US20200322689A1 (en) * 2017-12-20 2020-10-08 Juhaokan Technology Co., Ltd. Method For Processing Television Screenshot, Smart Television, And Storage Medium

Also Published As

Publication number Publication date
FR3133964A1 (fr) 2023-09-29

Similar Documents

Publication Publication Date Title
US8751672B2 (en) Personal video channels
EP2057632B1 (fr) Procede de gestion d'un programme multimedia, serveur, terminaux, signal et programmes informatiques correspondants
US8266665B2 (en) TV screen capture
US20060184989A1 (en) Interacting with Internet applications via a broadband network on electronic input/output devices
EP3127336B1 (fr) Dispositif et procédé de commande a distance de la restitution de contenus multimedia
WO2014154975A1 (fr) Generation et restitution d'un flux representatif d'un contenu audiovisuel
EP1741294B1 (fr) Procede et dispositif de traitement automatique d'informations spontanees
EP3430786B1 (fr) Acquisition d'extraits d'un flux multimédia sur un terminal
WO2023180274A1 (fr) Gestion perfectionnée d'un code visuel en cours d'affichage dans un contenu multimédia
EP1793605A1 (fr) Procédé de fourniture sur demande de menus interactifs à des terminaux couplés à un réseau de communication
FR3116172A1 (fr) Procédé de gestion de l’accès à un contenu numérique
EP2820821B1 (fr) Procede et dispositif de mise a disposition d'au moins une donnee de communication
EP2815583A1 (fr) Navigation deportee
EP3959894A1 (fr) Commande d'un service utilisant le traitement d'un flux comprenant des donnees multimedias
FR3131160A1 (fr) Procédé de restitution d’un contenu multimédia, programme d’ordinateur et terminal lecteur de flux multimédia correspondants.
WO2010010175A1 (fr) Procédé de gestion et de diffusion de messages promotionnels à un utilisateur dans un système multimédia
FR2905546A1 (fr) Procede et systeme de synchronisation d'informations avec un flux
FR2980944A1 (fr) Suivi d'actions de telespectateurs
FR3041852A1 (fr) Procede et dispositif d'enrichissement d'une fonction pause de la lecture d'une sequence d'images
FR2988963A1 (fr) Procede et systeme de deportation de l'acces a un service interactif de television numerique d'un recepteur numerique vers un terminal annexe.
WO2001065851A2 (fr) Boitier simple et basic pour television interactive
FR2938145A1 (fr) Traitement d'une requete destinee a un serveur interactif de guide des programmes, equipement de reception et serveur interactif associes

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23713088

Country of ref document: EP

Kind code of ref document: A1