FR2980067A1 - Traitement d'un flux d'images de television pour une adaptation a des ecrans de petites dimensions - Google Patents
Traitement d'un flux d'images de television pour une adaptation a des ecrans de petites dimensions Download PDFInfo
- Publication number
- FR2980067A1 FR2980067A1 FR1157996A FR1157996A FR2980067A1 FR 2980067 A1 FR2980067 A1 FR 2980067A1 FR 1157996 A FR1157996 A FR 1157996A FR 1157996 A FR1157996 A FR 1157996A FR 2980067 A1 FR2980067 A1 FR 2980067A1
- Authority
- FR
- France
- Prior art keywords
- images
- stream
- image
- predetermined scene
- scene
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 27
- 238000012545 processing Methods 0.000 title claims abstract description 12
- 230000006978 adaptation Effects 0.000 title claims abstract description 8
- 238000004590 computer program Methods 0.000 claims abstract description 6
- 230000008859 change Effects 0.000 claims abstract description 5
- 238000007619 statistical method Methods 0.000 claims abstract description 3
- 238000009877 rendering Methods 0.000 claims description 7
- 238000001514 detection method Methods 0.000 claims description 5
- 101100118004 Arabidopsis thaliana EBP1 gene Proteins 0.000 description 6
- 101150052583 CALM1 gene Proteins 0.000 description 6
- 102100025580 Calmodulin-1 Human genes 0.000 description 6
- 101100459256 Cyprinus carpio myca gene Proteins 0.000 description 6
- 101150091339 cam-1 gene Proteins 0.000 description 6
- 238000012360 testing method Methods 0.000 description 4
- 230000003936 working memory Effects 0.000 description 3
- 102100025579 Calmodulin-2 Human genes 0.000 description 2
- 101001077352 Homo sapiens Calcium/calmodulin-dependent protein kinase type II subunit beta Proteins 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000004907 flux Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
- H04N21/41407—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234363—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
- H04N5/2723—Insertion of virtual advertisement; Replacing advertisements physical present in the scene by virtual advertisement
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- General Engineering & Computer Science (AREA)
- Studio Circuits (AREA)
- Image Processing (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
L'invention concerne le traitement informatique d'un flux d'images numériques de télévision pour une adaptation des images à une restitution sur un écran de petites dimensions, tel qu'un terminal mobile. Le flux d'images est pré-monté et comprend des séquences successives, dont une séquence au moins comporte une prise de vue en plan large d'une scène prédéterminée, telle qu'un terrain d'une rencontre sportive. On prévoit en particulier les étapes : - reconnaissance (S51) dans les images de la scène prédéterminée, par exemple par détection des lignes du terrain précité, et - modification du flux d'images par application d'un zoom numérique (S54) aux images de la séquence comportant la scène prédéterminée. Le zoom permet alors à un utilisateur de mieux observer sur l'écran du terminal les images lorsqu'elles sont prises en plan large.
Description
TRAITEMENT D'UN FLUX D'IMAGES DE TELEVISION POUR UNE ADAPTATION A DES ECRANS DE PETITES DIMENSIONS La présente invention concerne le traitement d'un flux d'images numériques de télévision, pour une adaptation des images de ce flux à une restitution sur un écran de dimensions plus réduites que celles d'un écran de télévision. On comprendra que l'invention trouve une application avantageuse, mais non limitative, à la restitution d'images de télévision sur écrans de terminaux mobiles (téléphones cellulaires, tablettes PC, ordinateurs mobiles, etc.), ou encore, de façon plus générale, sur écrans de postes mobiles (de postes de télévision portatifs ou de terminaux mobiles). Dans le cas par exemple d'une retransmission d'un événement sportif impliquant un ballon (football ou tennis, par exemple) sur un écran de petites dimensions, il est difficile, voire impossible, de visualiser le ballon sur les séquences en plan large du terrain. Souvent, pour filmer des matches de football, on utilise une caméra en plan large, de position fixe par rapport au terrain, mais mobile en azimut (ou « pan »). Cette caméra délivre des images de haute définition, adaptées pour une restitution sur un poste de télévision, mais la réduction de telles images pour une restitution sur de petits écrans, notamment de terminaux mobiles, fait perdre des détails d'images : typiquement, la dimension du ballon dans de telles images devient inférieure à un pixel, et ainsi, le ballon n'est pas visible sur de telles images.
Un tel problème peut se poser aussi, de façon non limitative, par exemple pour la retransmission d'images de « plateaux » d'émission de télévision avec plusieurs intervenants sur des écrans de petites dimensions. En particulier dans les plans larges présentant plusieurs intervenants, le détail des visages peut être perdu sur des écrans de dimensions réduites.30 La présente invention vient améliorer la situation. Elle propose à cet effet un procédé mis en oeuvre par des moyens informatiques, de traitement d'un flux d'images numériques de télévision pour une adaptation de ces images à une restitution sur écran d'un poste mobile. Le flux d'images étant en particulier pré-monté, il comprend des séquences successives dont une séquence au moins comporte une prise de vue en plan large d'une scène prédéterminée (par exemple un terrain d'une rencontre sportive). Le procédé au sens de l'invention comporte alors les étapes : a) reconnaissance, dans les images du flux, de la scène prédéterminée, et b) modification du flux d'images par application d'un zoom numérique aux images de la séquence qui comportent la scène prédéterminée. Ainsi, la présente invention permet d'appliquer un zoom numérique, après montage du flux, aux images des séquences prises en plan large, ce qui permet d'agrandir l'image apparente de la scène et de mieux observer les détails (par exemple un ballon) pendant une restitution sur un écran de petites dimensions comme celui d'un terminal mobile. Avantageusement, l'invention s'appuie sur une reconnaissance de la scène prédéterminée, par exemple par reconnaissance d'intersections de lignes de terrain de sport (football, tennis ou autre), pour identifier une séquence filmée en plan large. Par contre, lorsqu'une séquence est filmée en plan serré (par exemple sur un joueur du terrain), la scène n'est pas reconnue et le zoom n'est pas appliqué (comme on le verra plus loin en référence aux figures 2B et 3B commentées plus loin).
L'invention vient donc tirer un avantage d'une prise de vue en plan large dans laquelle les lignes du terrain (ou plus généralement la scène prédéterminée) peuvent facilement être identifiées, alors que l'image initiale correspondant à cette prise de vue en plan large est difficilement exploitable sur un écran de petites dimensions.30 Ainsi, si le flux d'images est issu d'une retransmission d'un événement sportif, la scène précitée comporte avantageusement des lignes de marquage d'un terrain sportif, et l'étape a) comporte une reconnaissance de lignes (ou d'intersections de lignes) du terrain.
Outre la reconnaissance de points caractéristiques d'une scène (par exemple des intersections de lignes ou la reconnaissance des lignes elles-mêmes), on connaît le suivi (ou « tracking ») de lignes (qui peut être par exemple dérivé d'une fonction de type dit « GMT » pour « Global Motion Tracking »). On peut prévoir avantageusement que l'étape a) comporte en outre un suivi des lignes pour appliquer à l'étape b) des opérations particulières de modification du flux, comme par exemple une incrustation d'un ou plusieurs objets virtuels (par exemple publicitaires). De telles fonctions de reconnaissance et/ou de suivi sont décrites notamment dans les documents EP0477351, EP0477351, EP1739626, FR-2,929,794. Le zoom numérique peut comporter une simple opération d'agrandissement d'une partie fixe, centrale, des images de la séquence comportant la scène prédéterminée.
Dans une variante plus sophistiquée, le procédé peut comporter en outre une reconnaissance et un suivi d'un élément d'intérêt, prédéterminé, dans les images de la séquence comportant la scène prédéterminée, et l'application du zoom numérique peut comporter alors une opération d'agrandissement d'une partie d'image qui inclut cet élément d'intérêt.
Par exemple, si le flux d'images est issu d'une retransmission d'un événement sportif impliquant un ballon, cet élément d'intérêt peut être le ballon. Il est prévu alors une reconnaissance du ballon dans la séquence à zoomer, ainsi qu'un suivi du ballon pour centrer la partie d'image zoomée autour du ballon.30 Lorsque le flux est en outre pré-habillé et que les images du flux comportent un logo dans une zone fixe d'image, il est avantageux d'appliquer en outre les étapes suivantes : cl) détourer cette zone fixe de logo, et c2) modifier le flux d'images au moins par application d'un zoom numérique à cette zone fixe de logo. Comme on le verra dans les exemples de réalisation décrits ci-après en référence aux figures (notamment sur la figure 4), la zone de logo (pouvant comporter par exemple un numéro de chaîne de télévision et/ou un instant depuis le début d'une rencontre sportive et/ou le score de la rencontre, etc.) est détourée, zoomée et replacée à une position adéquate dans les images du flux modifié. Or, souvent, le logo de chaîne de télévision et/ou de score de rencontre sportive est formé de pixels colorisés, faisant néanmoins apparaître en transparence l'image originale. On comprendra alors que l'application des opérations cl) et c2) du procédé induit au moins une différence d'agrandissement apparent d'image dans cette zone, caractéristique de l'application de ces étapes du procédé.
La présente invention peut avantageusement être mise en oeuvre par l'exécution d'un programme informatique traitant les données d'image du flux initial pour produire le flux modifié. A ce titre, la présente invention vise aussi un tel programme informatique comportant des instructions pour la mise en oeuvre du procédé ci-avant, lorsque ce programme est exécuté par un processeur.
La présente invention vise aussi un dispositif de traitement d'un flux d'images numériques de télévision pour une adaptation des images à une restitution sur écran d'un poste mobile (le flux d'images étant pré-monté et comprenant des séquences successives dont une séquence au moins comporte une prise de vue en plan large d'une scène prédéterminée). Le dispositif comporte en particulier des moyens : - de reconnaissance, dans les images, de la scène prédéterminée, et - d'application d'un zoom numérique aux images de la séquence comportant la scène prédéterminée, pour délivrer un flux d'images modifié. Comme on le verra plus en détail dans les exemples de réalisation ci-après, de tels moyens peuvent comporter un processeur et une mémoire de travail judicieusement programmée, ainsi qu'une entrée du flux et une sortie du flux modifié. En outre, le flux étant pré-habillé et les images du flux comportant un logo dans une zone fixe d'image, le dispositif comporte avantageusement des moyens pour détourer ladite zone fixe de logo, et pour appliquer au moins un zoom numérique à ladite zone fixe de logo. D'autres avantages et caractéristiques de l'invention apparaîtront à la lecture de la description détaillée ci-après et à l'examen des dessins annexés, sur lesquels : - la figure lA représente schématiquement une installation pour la mise en oeuvre de la présente invention ; - la figure 1B représente schématiquement un dispositif pour adapter le flux d'images FL à une restitution sur des écrans de dimensions réduites, en modifiant le flux d'images (devenant FL' sur la figure 1B) ; - la figure 2A illustre une image du flux initial FL, correspondant à une prise de vue en plan large ; - la figure 2B illustre une image du flux initial FL, correspondant à une prise de vue en plan serré ; - la figure 3A illustre une image du flux modifié FL' correspondant à l'image de la figure 2A, après traitement du flux initial FL au sens de l'invention ; - la figure 3B illustre une image du flux modifié FL', correspondant à l'image de la figure 3A, après traitement au sens de la présente invention ; - la figure 4 illustre le traitement du cartouche CAR indiquant, dans l'exemple représenté, un instant depuis le début d'une rencontre sportive, ainsi qu'un score de rencontre, dans un mode de réalisation particulier de la présente invention ; - la figure 5 résume les étapes principales d'un procédé au sens de la présente invention, correspondant à l'organigramme d'un algorithme général d'un programme informatique possible pour la mise en oeuvre de la présente invention ; - la figure 6A illustre une image du flux initial FL, correspondant à une prise de vue en plan large, et la figure 6B illustre une image du flux modifié FL', correspondant à l'image de la figure 6A, après un traitement de zoom au sens de la présente invention, ainsi qu'une incrustation d'objet virtuel. On se réfère tout d'abord à la figure 1A, sur laquelle un terrain TE (par exemple de football) est filmé par plusieurs caméras, dont l'une au moins CAM1 filme la rencontre sportive en plan large Ainsi, la figure 2A est un exemple d'image en plan large que peut filmer la caméra CAM1. Les différents signaux issus de ces caméras CAM1, CAM2, etc., sont envoyés à une unité UN1, située par exemple dans un camion de régie à proximité du terrain TE, dans laquelle les différents signaux de caméras sont montés selon une succession de séquences de plans filmés par les caméras Ainsi, par exemple, le flux d'images FLO, une fois monté, peut comporter une séquence filmée par la caméra CAM1 en plan large (correspondant à l'image de la figure 2A), suivie d'une séquence filmée par une autre caméra CAM2, filmant en plan serré l'un des joueurs par exemple (figure 2B). Ce flux FLO, en sortie de l'unité UN1, peut par exemple être transmis ensuite à une autre unité UN2 située par exemple dans un studio de télévision pour habiller le flux avec par exemple : - un logo de chaîne ; - des logos d'incrustations publicitaires ; - un cartouche d'instant de début de rencontre sportive et/ou de score de la rencontre (référence CAR de la figure 2A ou de la figure 4).
Ainsi, le flux FLO est habillé avec de telles incrustations auprès de l'unité UN2, pour délivrer un flux FL destiné à une diffusion générale. Toutefois, avec l'essor de la retransmission de programmes télévisuels sur des terminaux mobiles (référence TER de la figure 1A), équipés souvent d'écrans ECR de dimensions réduites par rapport à des postes de télévision standard, les images d'un flux classique FL (telles que représentées par exemple sur la figure 2A) ne sont pas adaptées à de telles restitutions sur petits écrans et, en particulier : - la balle, par exemple, de la rencontre sportive (référence BAL de la figure 2A), ou - le score de la rencontre dans le cartouche CAR ; ou encore - la dimension apparente des joueurs dans l'image (ou leur numéro de maillot par exemple) ; sont des éléments de trop petite taille pour être affichés correctement sur l'écran d'un terminal mobile. Par exemple, il a été observé que la dimension d'un ballon de football (référence BAL de la figure 2A) sur un plan large, devenait inférieure à un pixel lorsque l'image est restituée sur un écran de terminal mobile de type Smart Phone. Ainsi, il devient impossible pour un utilisateur de suivre une rencontre sportive. La présente invention propose d'adapter le flux FL, à l'aide d'un dispositif approprié DIS, pour transformer le flux FL en un flux FL', permettant une visualisation correcte des images sur un écran ECR de petite taille, par exemple d'un terminal mobile TER.
La présente invention prévoit avantageusement d'effectuer un zoom numérique dans les images prises en plan large pour adapter le flux d'images pour une restitution sur écran de dimensions réduites. En particulier, l'invention s'appuie sur une reconnaissance d'une scène prédéterminée dans les images du flux, pour appliquer ce zoom numérique.
Par exemple, pour des images d'une retransmission d'une rencontre de football, la figure 2A présente des lignes de terrain Ll, L2, L3, L4, L5 (ci-après référencées de manière générale Li), ces lignes de terrain étant de dimensions caractéristiques et séparées par des distances caractéristiques du terrain de la rencontre sportive Ainsi, lorsque de telles lignes apparaissent sur une image, un module informatique de reconnaissance de lignes ou d'intersections de lignes (connu en soi) reconnaît la scène prédéterminée correspondant au terrain TE et identifie instantanément qu'il s'agit d'un plan large filmé par la caméra CAM1. L'invention peut s'appliquer aussi à d'autres types d'images. Elle peut utiliser en variante une reconnaissance d'éléments caractéristiques d'un plateau de télévision (comme un panneau de couleur particulière par exemple, ou encore des éléments de marquage dans le décor du plateau). Ainsi, dans le flux initial obtenu à l'étape S50 de la figure 5, cette étape de reconnaissance de la scène prédéterminée S51 permet à l'étape S52 de déterminer si une image du flux est prise en plan large ou non. Si tel est le cas (flèche OK en sortie du test S52), un zoom est effectué à l'étape S54, par exemple dans la partie encadrée en traits pointillés de la figure 2A, conformément à l'image présentée dans la figure 3A.
Dans l'exemple représenté sur la figure 3A, le zoom est simplement effectué dans une partie centrale de l'image (encadrée en traits pointillés). Toutefois, dans une variante plus sophistiquée, le ballon BAL peut être identifié par reconnaissance dans l'image 2A et le zoom qui est effectué peut être centré autour du ballon BAL Ainsi, une étape S53 de reconnaissance du ballon BAL peut être mise en oeuvre dans cette variante plus sophistiquée Ainsi, dans une telle réalisation, le procédé comporte une reconnaissance et un suivi d'un élément d'intérêt, prédéterminé (tel que le ballon), dans les images de la séquence en plan large (étape S53). L'application du zoom numérique (étape suivante S54) comporte alors une opération d'agrandissement d'une partie d'image centrée sur l'élément d'intérêt.
Toutefois, cette étape S53 est optionnelle et elle est représentée en traits pointillés, de ce fait, sur la figure 5. En référence maintenant à la figure 3B, si aucune ligne de terrain ou élément caractéristique d'une scène prédéterminée n'est reconnu à l'étape S52 (flèche KO en sortie du test S52), l'image courante du flux FL est interprétée comme correspondant à une prise de vue en plan serré et aucun zoom numérique n'est effectué. En revanche, lorsque la scène prédéterminée a été reconnue (par exemple, lorsque des intersections de lignes Li ont été identifiées), le zoom numérique est effectué tant que les éléments de la scène peuvent être reconnus (flèche OK en sortie du test S52). Il peut alors être avantageux de prévoir une détection de changement de séquence (étape S58 de la figure 5) dans les images du flux FL, par exemple par analyse statistique de caractéristiques des pixels d'image, avant de mettre en oeuvre la reconnaissance de scène S51 à l'étape a) précitée. Cette détection de changement de séquence S58 (dite détection de « cut ») peut être menée par analyse d'une répartition statistique d'une caractéristique particulière des pixels d'image, comme par exemple la luminosité ou la couleur des pixels. Par exemple, s'il est observé une variation brusque de la moyenne ou de la médiane (dans un histogramme) de cette caractéristique sur l'ensemble des pixels de l'image, alors une présomption forte d'un changement de séquence (flèche OK en sortie du test S58) déclenche la reconnaissance de scène à l'étape S51.
On peut avantageusement profiter de la reconnaissance de scène à l'étape S51 pour réaliser une incrustation graphique d'objet virtuel, comme présenté ci-après en référence aux figures 6A et 6B. On a représenté sur la figure 6A une image prise en plan large et donc sur laquelle un zoom est effectué au sens de l'invention. On relèvera un affichage publicitaire AFF dans l'image initiale prise en plan large, qui ne peut pas être visualisé par un utilisateur d'un terminal à écran de dimensions réduites. En référence à la figure 6B, le zoom numérique effectué ne permet pas à l'utilisateur précité de visualiser beaucoup mieux l'affichage AFF. De façon avantageuse, on prévoit alors une étape S57 d'incrustation graphique d'un objet virtuel OBV, avec de grandes dimensions apparentes dans la scène reconnue.
Ainsi, l'étape b) précitée de modification du flux initial FL peut avantageusement comporter en outre une incrustation d'au moins un objet virtuel OBV dans les images de la scène reconnue, à une position et/ou avec une perspective dans la scène qui sont déterminées en fonction de la reconnaissance de scène effectuée à l'étape a) (étape S52).
Par exemple, des intersections de lignes particulières peuvent être reconnues par l'exécution d'un programme informatique, ce qui permet de déterminer un abaque du terrain (connaissant au préalable sa forme et ses dimensions) et de là une position courante de la caméra en plan large CAM1 (en angle de pan, par exemple) Ainsi, l'incrustation virtuelle peut respecter une perspective courante de prise de vue du terrain. Ensuite, après l'étape a) de reconnaissance de la scène, on peut avantageusement prévoir un suivi (S52) de la scène prédéterminée pour appliquer l'incrustation de l'objet virtuel OBV (à la bonne position et/ou à la bonne perspective par rapport à la prise de vue courante), et ce, tant que les images du flux comportent au moins partiellement la scène prédéterminée. Ainsi, des éléments caractéristiques de cette scène (par exemple les lignes du terrain) sont préférentiellement suivis à l'étape S52 (par une technique telle que par exemple celle dite « GMT », pour « Global Motion Tracking »), ce qui permet alors de déterminer dans chaque image de la séquence en plan large la position et la perspective à appliquer à l'objet virtuel à incruster, pour effectuer dans le flux à délivrer FL' l'incrustation d'un ou plusieurs objets graphiques virtuels..30 La reconnaissance et le suivi d'objets reconnus, ainsi que la détection de cut, sont des outils connus en soi, notamment par les documents cités ci-avant EP0477351, EP0477351, EP1739626, FR-2,929,794.
Avantageusement, il est procédé aussi à un zoom numérique du cartouche CAR, avec un déplacement pour un recentrage dans l'image du flux modifié FL'. On a représenté sur la figure 2B les dimensions et la position, en encadré en traits pointillés, du cartouche modifié CAR', zoomé et légèrement déplacé (sur la gauche de l'image).
Dans cette étape (correspondant à la référence S55 de la figure 5), le cartouche initial CAR est découpé, zoomé et recollé (avec un léger décalage vers la gauche) dans le flux modifié FL'. Habituellement, l'incrustation d'un tel cartouche s'effectue en transparence avec une teinte choisie des pixels de l'image initiale (sans habillage de cartouche) Ainsi, dans l'image de la figure 2A, on peut voir en transparence des têtes de la foule assistant à la rencontre sportive (en particulier dans l'affichage du score). Ainsi, lorsque le cartouche CAR est découpé et zoomé, il reste apparent des pixels qui étaient présents dans l'image initiale en plan large (cet effet étant particulièrement visible près des lettres « IRL » du cartouche CAR de la figure 4). On comprendra alors qu'une trace de la mise en oeuvre de cette étape du procédé au sens de l'invention, concernant le découpage, le zoom et le recollage du cartouche CAR, se manifeste par un artefact visuel de pixels incohérents apparaissant dans le cartouche (comme des pixels représentant des têtes d'une foule apparaissant dans la pelouse du terrain, dans l'exemple représenté sur la figure 4).
Finalement, après cette étape d'adaptation du cartouche CAR, le flux FL' monté et habillé, ainsi modifié pour une adaptation à des terminaux comportant des écrans de petites dimensions, est obtenu à l'étape S56 de la figure 5 et peut être transmis à de tels terminaux TER.
On comprendra alors que l'invention permet de traiter numériquement des données d'images, sans moyen particulier supplémentaire autre qu'un processeur PROC et une mémoire de travail MEM. Ainsi, en référence à la figure 1B illustrant schématiquement un dispositif pour la mise en oeuvre de l'invention, le dispositif peut simplement comporter une interface d'entrée I recevant les données d'images du flux FL monté et pré-habillé. Le dispositif peut comporter alors un processeur PROC et une mémoire de travail MEM pour reconnaître une scène prédéterminée et appliquer un zoom numérique dans les images comportant cette scène, et délivrer enfin par une interface de sortie O le flux modifié FL', adapté pour une restitution sur des écrans de petites dimensions.
Bien entendu, la présente invention ne se limite pas à la forme de réalisation décrite ci- avant à titre d'exemple ; elle s'étend à d'autres variantes. On a représenté ci-avant des images d'une rencontre de football. Le procédé au sens de l'invention s'applique à d'autres types d'images, comme par exemple des images d'une rencontre de tennis, ou de tout autre sport nécessitant notamment un agrandissement de ballon ou de balle. Comme indiqué ci-avant, l'invention peut s'appliquer aussi à la retransmission d'images prises en studio, par exemple d'un plateau télévisé, faisant intervenir plusieurs personnages qui peuvent être pris dans des images en plan large. Dans ce cas, le zoom numérique peut être appliqué par exemple à une partie centrale de l'image. On comprendra ainsi que l'étape S53 de reconnaissance et suivi du ballon, est optionnelle pour la mise en oeuvre de l'invention.
Par ailleurs, le détourage, le zoom et le replacement du cartouche CAR décrits ci-avant sont optionnels pour la mise en oeuvre de l'invention. En effet, il peut être prévu de détecter les plans larges et appliquer le zoom numérique dans les images prises en plan large dans un flux simplement monté et non pas habillé, comme le flux FLO décrit ci-avant (issu de l'unité UN1 de la figure 1A).30
Claims (13)
- REVENDICATIONS1. Procédé mis en oeuvre par des moyens informatiques, de traitement d'un flux d'images numériques de télévision pour une adaptation desdites images à une restitution sur écran d'un poste mobile, le flux d'images étant pré-monté et comprenant des séquences successives dont une séquence au moins comporte une prise de vue en plan large d'une scène prédéterminée, caractérisé en ce qu'il comporte les étapes : a) reconnaissance (S51) dans lesdites images de la scène prédéterminée, et b) modification du flux d'images par application d'un zoom numérique (S54) aux images de la séquence comportant la scène prédéterminée.
- 2. Procédé selon la revendication 1, caractérisé en ce que, ledit flux d'images étant issu d'une retransmission d'un événement sportif, ladite scène prédéterminée comporte des lignes de marquage (Li) d'un terrain sportif, et en ce que l'étape a) comporte une reconnaissance de lignes du terrain.
- 3. Procédé selon l'une des revendications précédentes, caractérisé en ce que l'étape b) comporte en outre une incrustation (S57) d'au moins un objet virtuel (OBV) dans lesdites images de la scène, à une position et/ou avec une perspective dans la scène déterminées en fonction de la reconnaissance de scène effectuée à l'étape a).
- 4. Procédé selon la revendication 3, caractérisé en ce que, suite à l'étape a), le procédé comporte un suivi (S52) de ladite scène prédéterminée pour appliquer ladite incrustation tant que les images du flux comportent au moins partiellement la scène prédéterminée.
- 5. Procédé selon l'une des revendications précédentes, caractérisé en ce qu'il comporte une détection de changement de séquence (S58) dans les images du flux par analyse statistique de caractéristiques des pixels d'image, préalable à l'étape a).
- 6. Procédé selon l'une des revendications précédentes, caractérisé en ce que l'application du zoom numérique comporte une opération d'agrandissement d'une partie fixe, centrale, des images de la séquence comportant la scène prédéterminée. 5
- 7. Procédé selon l'une des revendications 1 à 5, caractérisé en ce qu'il comporte en outre une reconnaissance et un suivi (S53) d'un élément d'intérêt, prédéterminé, dans les images de la séquence comportant ladite scène prédéterminée, et en ce que l'application du zoom numérique comporte une opération d'agrandissement d'une 10 partie d'image comportant ledit élément d'intérêt.
- 8. Procédé selon la revendication 7, caractérisé en ce que, ledit flux d'images étant issu d'une retransmission d'un événement sportif impliquant un ballon, ledit élément d'intérêt est un ballon (BAL). 15
- 9. Procédé selon l'une des revendications précédentes, caractérisé en ce que, le flux étant en outre pré-habillé, les images du flux comportent un logo dans une zone fixe d'image (CAR), et en ce que le procédé comporte en outre les étapes (S55) : cl) détourer ladite zone fixe de logo, et 20 c2) modifier le flux d'images par application d'un zoom numérique à ladite zone fixe de logo.
- 10. Procédé selon la revendication 9, caractérisé en ce que, ledit flux d'images étant issu d'une retransmission d'une rencontre sportive, le logo comporte au moins un 25 score propre à ladite rencontre sportive et/ou un instant depuis le début de la rencontre sportive.
- 11. Programme informatique caractérisé en ce qu'il comporte des instructions pour la mise en oeuvre du procédé selon l'une des revendications 1 à 10, lorsque ce programme 30 est exécuté par un processeur.
- 12. Dispositif de traitement d'un flux d'images numériques de télévision pour une adaptation desdites images à une restitution sur écran d'un poste mobile, le flux d'images étant pré-monté et comprenant des séquences successives dont une séquence au moins comporte une prise de vue en plan large d'une scène prédéterminée, caractérisé en ce qu'il comporte des moyens (PROC, MEM) : - de reconnaissance, dans lesdites images, de la scène prédéterminée, et - d'application d'un zoom numérique aux images de la séquence comportant la scène prédéterminée, pour délivrer un flux d'images modifié. 10
- 13. Dispositif selon la revendication 12, caractérisé en ce que, le flux étant en outre pré-habillé et les images du flux (FL) comportant un logo dans une zone fixe d'image (CAR), le dispositif comporte en outre des moyens pour détourer ladite zone fixe de logo, et pour appliquer un zoom numérique à ladite zone fixe de logo.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR1157996A FR2980067B1 (fr) | 2011-09-08 | 2011-09-08 | Traitement d'un flux d'images de television pour une adaptation a des ecrans de petites dimensions |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
FR1157996A FR2980067B1 (fr) | 2011-09-08 | 2011-09-08 | Traitement d'un flux d'images de television pour une adaptation a des ecrans de petites dimensions |
Publications (2)
Publication Number | Publication Date |
---|---|
FR2980067A1 true FR2980067A1 (fr) | 2013-03-15 |
FR2980067B1 FR2980067B1 (fr) | 2013-09-27 |
Family
ID=45093989
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
FR1157996A Expired - Fee Related FR2980067B1 (fr) | 2011-09-08 | 2011-09-08 | Traitement d'un flux d'images de television pour une adaptation a des ecrans de petites dimensions |
Country Status (1)
Country | Link |
---|---|
FR (1) | FR2980067B1 (fr) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021173224A1 (fr) * | 2020-02-28 | 2021-09-02 | Rovi Guides, Inc. | Systèmes et procédés pour modifier de manière adaptative la présentation d'un contenu multimédia |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5264933A (en) * | 1991-07-19 | 1993-11-23 | Princeton Electronic Billboard, Inc. | Television displays having selected inserted indicia |
US20060061602A1 (en) * | 2004-09-17 | 2006-03-23 | Philippe Schmouker | Method of viewing audiovisual documents on a receiver, and receiver for viewing such documents |
US20080118153A1 (en) * | 2006-07-14 | 2008-05-22 | Weiguo Wu | Image Processing Apparatus, Image Processing Method, and Program |
FR2929794A1 (fr) * | 2008-04-08 | 2009-10-09 | Leo Vision Soc Par Actions Sim | Procede et systeme de traitement d'images pour l'incrustation d'elements virtuels |
US20100150451A1 (en) * | 2007-02-22 | 2010-06-17 | Samsung Electronics Co., Ltd. | Extraction method of an interest region for multimedia mobile users |
-
2011
- 2011-09-08 FR FR1157996A patent/FR2980067B1/fr not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5264933A (en) * | 1991-07-19 | 1993-11-23 | Princeton Electronic Billboard, Inc. | Television displays having selected inserted indicia |
US20060061602A1 (en) * | 2004-09-17 | 2006-03-23 | Philippe Schmouker | Method of viewing audiovisual documents on a receiver, and receiver for viewing such documents |
US20080118153A1 (en) * | 2006-07-14 | 2008-05-22 | Weiguo Wu | Image Processing Apparatus, Image Processing Method, and Program |
US20100150451A1 (en) * | 2007-02-22 | 2010-06-17 | Samsung Electronics Co., Ltd. | Extraction method of an interest region for multimedia mobile users |
FR2929794A1 (fr) * | 2008-04-08 | 2009-10-09 | Leo Vision Soc Par Actions Sim | Procede et systeme de traitement d'images pour l'incrustation d'elements virtuels |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021173224A1 (fr) * | 2020-02-28 | 2021-09-02 | Rovi Guides, Inc. | Systèmes et procédés pour modifier de manière adaptative la présentation d'un contenu multimédia |
US11259081B2 (en) | 2020-02-28 | 2022-02-22 | Rovi Guides, Inc. | Systems and methods for adaptively modifying presentation of media content |
US11665393B2 (en) | 2020-02-28 | 2023-05-30 | Rovi Guides, Inc. | Systems and methods for adaptively modifying presentation of media content |
US11956500B2 (en) | 2020-02-28 | 2024-04-09 | Rovi Guides, Inc. | Systems and methods for adaptively modifying presentation of media content |
Also Published As
Publication number | Publication date |
---|---|
FR2980067B1 (fr) | 2013-09-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US12026947B2 (en) | Methods and apparatus to measure brand exposure in media streams | |
US10580219B2 (en) | System and method to digitally replace objects in images or video | |
US9628837B2 (en) | Systems and methods for providing synchronized content | |
Pece et al. | Bitmap movement detection: HDR for dynamic scenes | |
FR2929794A1 (fr) | Procede et systeme de traitement d'images pour l'incrustation d'elements virtuels | |
FR2875662A1 (fr) | Procede de visualisation de document audiovisuels au niveau d'un recepteur, et recepteur apte a les visualiser | |
FR2980067A1 (fr) | Traitement d'un flux d'images de television pour une adaptation a des ecrans de petites dimensions | |
EP1615427B1 (fr) | Procédé d'obtention d'une succession d'images sous la forme d'un effet tournant | |
US20210209768A1 (en) | Object movement indication in a video | |
EP3721319A1 (fr) | Procédé d'interaction avec un sous-titre affiché sur un écran de télévision, dispositif, produit-programme d'ordinateur et support d'enregistrement pour la mise en oeuvre d'un tel procédé | |
EP3219094B1 (fr) | Dispositif de génération de rushes cinématographiques par analyse vidéo | |
FR2936924A1 (fr) | Procede de conversion de format d'image avec insertion de bandeau d'information. | |
EP3398345B1 (fr) | Procédé et dispositif de traitement de flux multimédia pour vérification des droits d'accès | |
US11908340B2 (en) | Magnification enhancement of video for visually impaired viewers | |
EP2826017B1 (fr) | Procédé de détermination des paramètres géométriques indiquant le mouvement d'une caméra | |
EP1739626B1 (fr) | Procédé pour tracer des objets graphiques virtuels sur des images d'un terrain, notamment un terrain de jeu pour un évènement sportif | |
GB2454582A (en) | Determining brand exposure in an expected region of interest (ROI), and further image template modification methods | |
FR3103343A1 (fr) | Procédé de modification d’un flux vidéo |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
ST | Notification of lapse |
Effective date: 20160531 |