EP3281093A1 - Bracelet electronique pour l'affichage d'un contenu numerique interactif destine a etre projete sur une zone d'un bras - Google Patents

Bracelet electronique pour l'affichage d'un contenu numerique interactif destine a etre projete sur une zone d'un bras

Info

Publication number
EP3281093A1
EP3281093A1 EP16719037.0A EP16719037A EP3281093A1 EP 3281093 A1 EP3281093 A1 EP 3281093A1 EP 16719037 A EP16719037 A EP 16719037A EP 3281093 A1 EP3281093 A1 EP 3281093A1
Authority
EP
European Patent Office
Prior art keywords
image
bracelet
detector
interaction
zone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP16719037.0A
Other languages
German (de)
English (en)
Inventor
Pascal Pommier
Guillaume POMMIER
Nicolas CRUCHON
Fabien VIAUT-NOBLET
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cn2p
Original Assignee
Cn2p
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cn2p filed Critical Cn2p
Publication of EP3281093A1 publication Critical patent/EP3281093A1/fr
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1637—Details related to the display arrangement, including those related to the mounting of the display in the housing
    • G06F1/1639—Details related to the display arrangement, including those related to the mounting of the display in the housing the display being based on projection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/169—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/3173—Constructional details thereof wherein the projection device is specially adapted for enhanced portability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • H04N9/3185—Geometric adjustment, e.g. keystone or convergence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191—Testing thereof
    • H04N9/3194—Testing thereof including sensor feedback

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Geometry (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

Le bracelet électronique (1) pour l'affichage d'un contenu numérique interactif destiné à être projeté sur une zone d'un bras (100, 101), comprend: Un émetteur (30) d'un faisceau lumineux (31) dans une bande de fréquence non visible formant une nappe lumineuse destinée à couvrir une première zone (Z1) d'un bras (101, 102); Un projecteur (20) projetant une image (22) sur une seconde zone (Z2), la première zone (Z1) se superposant sensiblement à la seconde zone (Z2); Un premier détecteur (10) capturant une image de la seconde zone (Z2); Un calculateur (K) déterminant au moins une position d'au moins un point d'interaction du faisceau lumineux (31) par l'analyse d'une trace de l'image acquise par le premier détecteur (10).

Description

BRACELET ELECTRONIQUE POUR L'AFFICHAGE D'UN CONTENU NUMERIQUE INTERACTIF DESTINE A ETRE PROJETE SUR UNE ZONE
D'UN BRAS
DOMAINE
Le domaine de l'invention concerne les bracelets électroniques pour l'affichage d'un contenu numérique sur une portion d'un bras. ETAT DE L'ART
Il existe actuellement un bracelet électronique permettant d'effectuer une projection d'images. Cette solution est décrite dans la demande de brevet US2015/0054730. En revanche, le mode de détection des interactions avec l'image présente des inconvénients. En effet, des fausses détections peuvent survenir du fait de la mauvaise appréciation de la position d'un doigt. Par ailleurs, une telle solution rencontre des difficultés de mises en œuvre tant dans la précision de détection des zones d'interactions que sur la qualité de la projection offerte sur une zone relativement petite. II existe un besoin d'un projecteur d'images intégré à un bracelet qui soit robuste, ayant une bonne définition d'images et proposant une interactivité fiable notamment en qui concerne la détection des points d'intérêts que souhaite activer un utilisateur. RESUME DE L'INVENTION
L'invention vise à pallier les inconvénients précités.
Un objet de l'invention concerne un bracelet électronique pour l'affichage d'un contenu numérique interactif destiné à être projeté sur une zone d'un bras. Le bracelet comprend :
■ Un émetteur d'un faisceau lumineux dans une bande de fréquence non visible formant une nappe lumineuse destinée à couvrir une première zone d'un bras ou d'un avant-bras ; ■ Un projecteur projetant une image sur une seconde zone, la première zone se superposant sensiblement à la seconde zone;
■ Un premier détecteur capturant une image de la seconde zone; ■ Un calculateur déterminant au moins une position d'au moins un point d'interaction du faisceau lumineux par l'analyse d'une trace de l'image acquise par le premier détecteur.
Un avantage est d'offrir une alternative de projection à un écran tactile. Le dispositif d'affichage est peu encombrant et facilement transportable en limitant la possibilité d'égarer ou de perdre le bracelet.
Selon un mode de réalisation, le bracelet comprend une bande destinée à être maintenue autour d'un poignet, une source d'alimentation et un bâti agencée et maintenue sur une partie supérieure du bracelet, ledit bâti comportant l'émetteur, le projecteur, le premier détecteur et le calculateur.
Un avantage est de répartir le poids du bracelet afin de trouver un équilibre. Un autre avantage est de rendre l'alimentation amovible sans impacter le bâti du bracelet.
Selon un mode de réalisation, le bracelet comprend :
■ Un composant permettant d'appliquer des facteurs de déformations à l'image projetée pour compenser :
o une déformation de surface liée à l'anatomie de l'avant- bras et/ou ;
o une déformation de perspective prenant en considération :
■ des déformations latérales de l'image projetée;
■ des déformations de profondeur de champ de l'image projetée.
Un avantage est de permettre un affichage confortable dans un format sensiblement rectangulaire ou du moins donnant la perception que l'image est sensiblement perpendiculaire. Un avantage est de compenser les effets de surface liée à l'anatomie de l'avant-bras comme la courbure latérale de l'avant-bras pouvant déformer l'image. Il est également possible de compenser les effets de perspective. Selon un mode de réalisation, les facteurs de déformations sont des facteurs de transformation d'une première forme géométrique 2D en une seconde forme géométrique 2D.
Selon un mode de réalisation, l'émetteur du faisceau lumineux est un émetteur infrarouge. Un avantage est qu'il apparaît invisible pour un utilisateur.
Selon un mode de réalisation, l'émetteur est un émetteur linéaire projetant un faisceau lumineux sensiblement plan.
Selon un mode de réalisation, l'émetteur est un émetteur est agencé sur le bâti dans une position située entre le projecteur et la bande du bracelet. Un avantage est de bénéficier de la hauteur d'écart entre le projecteur infrarouge et le détecteur de manière à optimiser la résolution et la précision de capture de l'image et donc de la position du centre d'interaction. Selon un mode de réalisation, le premier détecteur comprend une gamme de sensibilité permettant de détecter une trace causée par une interception du faisceau lumineux avec un corps. La gamme de sensibilité est adaptée à la gamme infrarouge. Lorsque la gamme du détecteur est plus large, des filtres peuvent être appliqués. Lorsque la trace apparaît sur des gammes connexes ou proches de la gamme infra rouge, un détecteur sensible à cette gamme en fréquence peut être utilisé.
Selon un mode de réalisation, le premier détecteur est un détecteur infrarouge capturant une image dans laquelle le faisceau lumineux forme une image dont les dimensions longitudinales, c'est-à-dire dans le sens de projection, sont identifiables.
Selon un mode de réalisation, la position d'au moins un point d'interaction est calculée à partir :
· d'une transformation de l'image et de la trace acquises en une image originale comprenant une image de la trace à partir des facteurs de transformation.
• d'une construction géométrique d'un point d'interaction d'au moins une trace ou image de la trace. Selon un mode de réalisation, le calculateur compare la position du point d'interaction avec une matrice de points délimitant des zones d'interaction dans un référentiel lié à l'image originale, le calculateur déduisant une probabilité d'interaction avec zone d'interaction.
Selon un mode de réalisation, le bracelet comprend en outre un second détecteur captant des images colorimétriques de la seconde zone.
Selon un mode de réalisation, le bracelet comprend un stabilisateur d'images, ledit stabilisateur d'images comparant les images acquises par le second détecteur avec des dimensions d'une image de référence et générant des facteurs correctifs à appliquer aux facteurs de déformations d'image en fonction de la comparaison des images.
Selon un mode de réalisation, le stabilisateur d'images compare les dimensions longitudinales de la seconde zone des images acquises par le premier détecteur avec les dimensions des images acquises par le second détecteur pour générer des facteurs de corrections à appliquer aux facteurs de transformation.
Selon un mode de réalisation, le calculateur génère une image témoin et que le projecteur projette régulièrement dans le flux d'images projetées ladite image témoin, la dite image témoin étant acquise par au moins un détecteur du bracelet de manière comparer des dimensions caractéristiques de l'image acquise avec une image de référence pour calculer des facteurs de corrections d'images.
Selon un mode de réalisation, l'image de référence est calculée lors d'une opération de calibration ou de première utilisation, l'image de référence étant obtenue par l'application de facteurs de transformation à une image projetée pour obtenir une image affichée dont les dimensions sont souhaitées, c'est-à-dire ayant une forme sensiblement rectangulaire, l'application des facteurs de transformation lors de cette opération étant réalisée à partir d'une interface du bracelet. Selon un mode de réalisation, le second détecteur effectue un second calcul d'un point d'interaction par l'analyse d'une trace interceptant l'image, ladite trace étant obtenue par une analyse d'une modification de la couleur des pixels d'une portion de l'image acquise.
Selon un mode de réalisation, le calculateur comprend une fonction de reconnaissance de forme permettant de détecter la présence de la forme d'un doigt dans l'image et d'en déterminer un point d'extrémité pour déduire le point d'interaction.
Selon un mode de réalisation, un calculateur corrèle la position d'un point d'interaction obtenue à partir d'une image acquise par le premier détecteur et la position d'un point d'interaction obtenue à partir d'une image acquise par le second détecteur, la corrélation des positions permettant de générer une nouvelle position d'un point d'interaction. Selon un mode de réalisation, le projecteur d'images est un pico- projecteur couleur.
Selon un mode de réalisation, le projecteur d'images comprend un laser bleu, un laser rouge et un laser vert et un ensemble de micro-miroirs s'orientant de sorte à produire en chaque point de projection un point dont la couleur est générée par une combinaison des trois lasers orientés par les miroirs.
Selon un mode de réalisation, le projecteur d'images est un projecteur de type LCOS.
Selon un mode de réalisation, le projecteur d'images émet une image dont la résolution est de 1920x2080.
Selon un mode de réalisation, le bracelet comprend un accéléromètre et un gyroscope permettant d'activer des fonctions générant une modification ou un changement de l'image projeté par le projecteur.
Selon un mode de réalisation, la source d'alimentation est une batterie amovible.
Un autre objet de l'invention concerne un dispositif de projection comprenant un bracelet de l'invention et comportant un socle comprenant des moyens de maintien du bracelet, le calculateur du bracelet comprenant un second mode de projection comprend des seconds facteurs de déformations d'images permettant une projection d'images sur second plan de projection, le second plan de projection étant confondu avec le plan de support du socle.
Selon un mode de réalisation, le socle comprend un émetteur d'un faisceau infrarouge sensiblement plan et un détecteur disposés sur la face opposée à la face du support en regard de la projection d'image du projecteur, ledit détecteur enregistrant des images comprenant au moins une trace d'interaction lorsque le faisceau est intercepté par un corps, le calculateur générant des consignes d'interaction modifiant l'image projetée en fonction d'une zone d'interaction détectée.
BREVE DESCRIPTION DES FIGURES
D'autres caractéristiques et avantages de l'invention ressortiront à la lecture de la description détaillée qui suit, en référence aux figures annexées, qui illustrent :
■ figure 1 : une vue de face d'un bracelet électronique comportant un projecteur de l'invention ;
■ figure 2 : un bras d'un utilisateur portant un bracelet de l'invention ;
■ figure 3 : une vue de coupe latérale du bracelet de l'invention et un mode de projection d'une image ;
■ figure 4 : une représentation d'un quadrillage utilisé pour détecter un point d'interaction sur une image projetée ;
■ figure 5 : une superposition d'une image originale et d'une matrice de points de délimitation pour le calcul d'une zone d'interaction ;
■ figure 6 : un bracelet électronique positionné sur un socle pour offrir un second mode d'affichage ;
■ figures 7A à 7E : un exemple d'applications de facteurs de transformation calculée à partir de l'acquisition d'une image projetée ; ■ figure 8 : un exemple de détection d'un point d'interaction à partir de l'analyse d'images capturées par le détecteur colorimétrique et le détecteur infrarouge. DESCRIPTION
La figure 1 représente un mode de réalisation d'un bracelet 1 de l'invention. Le bracelet comprend un bâti 3, une bande 2 et une source d'alimentation 4. Bande
La bande 2 forme la partie du bracelet permettant de maintenir ledit bracelet autour du poignet d'une personne. Elle peut comprendre un moyen de réglage 25 de la position d'attache de la bande afin de s'adapter à différentes circonférences de poignets. Le moyen de réglage 25 de la position du bracelet 1 peut permettre également de fixer deux parties de la bande autour du poignet entre elles. La bande peut être en matériau élastique souple, en tissu ou encore en matériau rigide comme un matériau plastique rigide, du métal ou en mousse ou encore tout autre matériau permettant de réaliser une bande. La bande 2 peut comprendre une épaisseur fine de la taille d'un bracelet de montre de quelques millimètres ou encore être plus épaisse de l'ordre de 1 ou 2 cm.
La partie inférieure du bracelet 1 est désignée comme une partie opposée à la partie du bracelet 1 comprenant le bâti 3 correspondant à la partie supérieure du bracelet 1 .
Source d'alimentation
Selon un mode de réalisation, une source d'alimentation 4 est positionnée dans la partie inférieure du bracelet 1 de sorte à rendre le bâti 3 moins encombrant en volume et de manière à équilibrer en poids et/ou esthétiquement le bracelet 1 de l'invention de part et d'autre. Ainsi le bracelet 1 peut trouver un meilleur équilibre lorsqu'il est maintenu autour d'un poignet. Selon ce mode de réalisation, le ou les connecteur(s) d'alimentation alimentant les composants électroniques du bâti peut(vent) être acheminé(s) le long de la bande 2 par exemple à l'intérieur de la bande 2 de sorte à être masqués de l'extérieur.
Selon un autre mode de réalisation, la source d'alimentation 4 est agencée sur la partie supérieure du bracelet 1 . Par exemple, le bâti 3 peut comprendre la source d'alimentation 4. Selon un autre exemple, la source d'alimentation peut être comprise dans un autre bâti accolé ou juxtaposé au bâti 3 sur la partie supérieure.
Selon un mode de réalisation, la source d'alimentation est une batterie rechargeable. La batterie peut alors être amovible et donc être retirée du bracelet 1 pour être rechargée. Une autre solution consiste à placer le bracelet 1 sur un socle comprenant une alimentation permettant la recharge de la batterie qui reste en position dans le bracelet. Selon un autre mode, la source d'alimentation est une pile échangeable.
Bâti
Selon un mode de réalisation, le bâti 3 comprend un émetteur infrarouge 30. L'émetteur 30 émet alors un faisceau lumineux 31 formant une nappe lumineuse. Avantageusement, l'émetteur 30 est agencé dans la partie basse du bâti et peut être un émetteur linéaire. La partie basse du bâti 3 est définie comme la partie la plus proche de la peau du poignet ou de l'avant- bras ou de la main d'une personne portant le bracelet 1 . Selon d'autres modes d'utilisations et selon les différents ports du bracelet de l'invention, l'affichage peut être réalisé sur la face antérieure ou la face postérieure de l'avant-bras. De manière analogue, la projection d'images peut être réalisée sur l'intérieur ou l'extérieur de la main. Un avantage est de réaliser un faisceau sensiblement plan au plus proche de la peau et sensiblement parallèle à la surface du poignet ou de l'avant-bras.
La figure 3 représente une vue de coupe dans laquelle le faisceau
31 est parallèle à la surface de l'avant-bras 101 et situé à une hauteur d. Selon un mode de réalisation, le bâti 3 comprend un projecteur 20 permettant de projeter une image selon un axe interceptant le poignet ou l'avant-bras d'une personne qui porte le bracelet 1 . La figure 3 représente en vue de coupe une portion du cône de projection 21 interceptant l'avant-bras 101 pour former une image 22. Le projecteur est agencé dans le bâti à une hauteur notée HLONG de la surface de l'avant-bras 101 .
Selon un mode de réalisation, le bâti 3 comprend un premier détecteur 10 pour détecter dans le domaine infrarouge les modifications de couleurs liées aux interactions du faisceau émis par l'émetteur 30.
Selon un mode de réalisation, le bâti 3 comprend un second détecteur 1 1 pour détecter les images émises dans le domaine des fréquences visibles pour ajuster en temps réelle la taille de l'image et/ou pour calculer en temps réel les facteurs de déformations à appliquer à l'image projetée.
Selon un mode de réalisation, le bâti 3 comprend des moyens de calculs, notés M sur la figure 3, tels qu'un calculateur pouvant être un microprocesseur, un microcontrôleur ou une puce électronique. Les moyens de calculs peuvent comprendre, selon le mode de réalisation choisi, un ou plusieurs calculateurs réalisant les différentes fonctions de traitements d'image. Parmi ces fonctions on trouve la génération d'images et les calculs de facteurs de déformation et/ou de correction d'images. En outre, le calculateur permet d'effectuer des calculs de positions de points d'interactions et d'asservissement de génération de nouvelles images en fonction des commandes détectées. Le calculateur est donc capable de générer les images à projeter en fonction des interactions détectées, ainsi que toutes autres fonctions nécessaires à la réalisation de l'invention.
Selon un mode de réalisation, le bâti 3 comprend une ou plusieurs mémoires, notée(s) M sur la figure 3, pour enregistrer des valeurs calculées temporaires ou pour stocker des informations d'interactions comme des positions de points d'interactions ou encore pour stocker des données permettant de générer des images ou toutes autres données nécessaires à la réalisation de l'invention.
Selon un mode de réalisation, le bâti 3 comprend un accéléromètre et un gyroscope pour mesurer des mouvements d'un poignet et/ou de l'avant-bras d'une personne portant le bracelet 1 . Les mouvements détectés peuvent l'être en comparant des valeurs des accélérations en référence à des valeurs connues et enregistrés qui correspondent à des actions à mener. A titre d'exemple, l'allumage du bracelet peut être effectué en tournant deux fois de suite le poignet le long de l'axe de l'avant-bras. Les valeurs d'accélération mesurées sur une période de temps donnée permettent de déterminer quelle action doit être engagée en fonction de la séquence de mouvement détectée.
Selon un autre exemple, une action de réveil peut être engagée pour allumer le bracelet 1 lorsqu'un seuil d'accélération en rotation autour de l'avant-bras a été franchi.
D'autres actions peuvent être indiquées selon des valeurs d'accélérations mesurées selon les trois axes d'un référentiel cartésien pour générer des actions spécifiques comme par exemple : activer un détecteur ou un projecteur, éteindre un détecteur ou un projecteur, générer une image ou modifier l'image générée, activer une nouvelle image à partir d'une première image en fonction d'un historique de navigation.
La figure 2 représente un bracelet 1 de l'invention positionné dans une portion du bras située entre l'avant-bras 101 et la main 100. Cette zone de jonction est nommée le poignet 102. Cette zone est avantageusement destinée au port du bracelet 1 de l'invention. Le bracelet 1 est représenté projetant une image 22 sur l'avant-bras 101 d'une personne. Le faisceau lumineux infrarouge 31 est représenté également se superposant à l'image affichée sur l'avant-bras 101 .
Selon un autre mode de réalisation, l'affichage de l'image 22 et la génération du faisceau 31 peuvent être réalisés sur la main. Pour se faire, un mode permet par exemple de retourner le bracelet 1 et d'inverser l'affichage afin d'activer le sens de projection de l'image 22 vers la main tout en bénéficiant d'une image affichée dans le sens de lecture. Selon un autre mode de réalisation, le bracelet est configuré pour un affichage vers la direction de la main. Cependant, ce mode d'affichage n'offre pas toute la surface de projection de l'avant-bras 101 . Les doigts et notamment les os carpiens limitent la zone d'affichage et causent une déformation de l'image affichée. Par ailleurs, les mouvements de la main 100 sont souvent plus brusque et plus sporadiques que ceux d'un avant-bras 101 , de ce fait, le stabilisateur d'images doit être plus réactif et doit être configuré de sorte à prendre en compte ces mouvements de la main.
Dans la suite de la description, le mode d'affichage dans le sens de l'avant-bras 101 est décrit et correspond à un mode préféré de l'invention. Détection des points d'interaction
Le faisceau 31 est émis préférentiellement dans une bande de fréquence non visible pour ne pas altérer l'image 22 projetée par le projecteur 20. Selon un mode de réalisation, le faisceau lumineux est émis par un émetteur linéaire générant un faisceau sensiblement plan dans une gamme de fréquence infrarouge. Le faisceau est émis selon un plan sensiblement parallèle à la surface de la peau entre 1 mm et 1 cm de la surface de la peau. Une distance entre 1 mm et quelques millimètres permet d'obtenir une bonne efficacité de détection sur la zone de projection en limitant les erreurs de fausses détections.
Dans un mode de réalisation, un module de gestion de puissance du faisceau émis peut être intégré dans le bâti. Une commande accessible par un utilisateur qui peut être soit numérique soit au moyen d'un discret lui permet de régler la puissance du faisceau. Cette commande permet d'ajuster par exemple un mode de nuit ou un mode de jour. Par défaut, la puissance est configurée de manière à offrir une bonne détection de jour comme de nuit. Un détecteur 10 permet d'acquérir dans une gamme de fréquences donnée au moins une trace 32 formée par l'interception du faisceau par un corps. Dans une utilisation nominale du bracelet 1 , le corps interceptant le faisceau est généralement le doigt d'un utilisateur qui se positionne sur une zone de l'image affichée. Un avantage du bracelet 1 de l'invention est de reproduire une interactivité comparable à celle des smartphones ou des tablettes qui comprennent un écran tactile mais sans l'utilisation et l'encombrement d'un tel écran. Un autre corps peut être utilisé comme par exemple un stylet. Lorsque le corps est un doigt, un avantage de l'invention est que l'interaction peut être détectée même avec l'utilisation d'un gant ce que ne permet pas un écran tactile.
Lorsqu'un corps intercepte en au moins un point le faisceau lumineux 31 , le détecteur 10 capte une variation lumineuse qui peut se traduire par la présence d'une tache blanche lorsque le faisceau est un faisceau infrarouge. Le détecteur 10 permet donc de générer une image comportant une trace 32 ayant des coordonnées dans l'image acquise correspondantes au point d'interaction que l'utilisateur souhaite engager par une action de son doigt. On rappelle que l'utilisateur ne voit pas le faisceau infrarouge 31 mais uniquement l'image projetée 22. Ainsi le bracelet offre une interactivité de commande transparente pour l'utilisateur. Le point d'interaction correspond donc à une zone de l'image qu'il souhaite activer. L'activation peut correspondre au souhait de naviguer sur une autre page en activant un lien ou peut correspondre à un choix parmi une liste de choix ou d'une option s'affichant et devant être validée. D'autres exemples d'activations sont envisageables selon le bracelet 1 de l'invention.
Un avantage de l'agencement du détecteur 10 qui est positionné à une hauteur plus importante que l'émetteur de faisceau 30 sur la bâti du bracelet 1 vis-à-vis de la surface du poignet est d'obtenir une bonne prise d'image reflétant des traces liées à l'interception du faisceau par un corps. D'autres systèmes existent évaluant la position en profondeur d'une interaction comme par exemple un fonctionnement de type « radar », mais ces dernières solutions restent approximatives et ne permettent pas de discriminer beaucoup de points sur la zone d'interaction. Ces derniers dispositifs génèrent de nombreuses fausses détections du fait de l'imprécision de l'évaluation de la distance du corps au détecteur. Un avantage du bracelet de l'invention est de proposer un agencement du détecteur offrant une perspective de détection de l'image affichée. Cette configuration améliore la détection d'un point d'interaction et la précision de la détermination des coordonnées du centre du point d'interaction.
Selon les modes de réalisation de l'invention, la détermination du point d'interaction peut être effectuée dans le référentielle liée à l'image projetée ou dans le référentielle de l'image acquise et transformée. Les deux variantes sont sensiblement équivalentes et offrent des résultats comparables. L'une ou l'autre de ces méthodes comprennent des avantages propres qui peuvent être choisi selon la conception envisagée. A titre d'exemple lorsque les calculs de positions sont effectués dans le référentiel de l'image affichée sur l'avant-bras, les calculs liés aux matrices de transformations de la tache détectée sont simplifiées. En revanche, lorsque les calculs de positions sont effectués dans le référentiel de l'image acquise et transformée, un gain de précision peut être obtenu sur la détermination du centre de la tache détectée et de la détermination de la zone activée de l'image.
Le bracelet 1 de l'invention permet donc l'analyse d'au moins une position d'un point d'interaction d'un utilisateur pour déterminer quelle zone de l'image sera activée. En effet, l'image peut comprendre des zones d'interactions. Une découpe logicielle de l'image permet de segmenter l'image en différentes zones d'interaction. L'invention permet alors de comparer la position du point d'interaction du faisceau à des points de références et d'identifier à quelle zone d'interaction de l'image ce point correspond-il.
Pour cela, le bracelet 1 de l'invention permet de transformer l'image acquise par le détecteur 10 dans un référentiel connu d'une image non déformée. Dans ce référentiel, l'image projetée avant l'application de facteurs de déformation ou l'image acquise après l'application de facteurs de déformation est dénommé image originale.
Différentes déformations peuvent être appliquées à l'image acquise pour la basculer dans un format lié à l'image originale. Les déformations appliquées à l'image lors de la projection permettent à un utilisateur de visionner l'image comme si elle était affichée en conservant les proportions d'une image originale. Inversement, les déformations appliquées lors de l'acquisition d'images permettent de prendre en compte les écarts liés au fait que le plan de détection n'est pas parallèle au plan de l'image et des effets de perspective.
Une première transformation peut être appliquée pour compenser le décalage latérale DLAT du détecteur 10 vis-à-vis de l'axe central de projection.
Une seconde transformation peut être appliquée pour compenser les effets de perspective de l'image projetée en profondeur et appliquer une transformation visant à rétablir l'image acquise dans un plan 2D. Les effets de perspective peuvent prendre en compte la hauteur entre le détecteur 10 et le plan de l'image projetée 22 sensiblement parallèle au plan formant l'avant-bras 101 . L'image acquise peut alors être transformée pour compenser cet écart. En outre, les effets de perspective latéraux peuvent être pris en compte par les facteurs de transformation ainsi que les effets de bords dont notamment la partie de l'image la plus proche du bracelet ainsi que la partie la plus éloignée.
Une troisième transformation peut être appliquée pour compenser les effets de surfaces liées à l'anatomie de l'avant-bras ou de la main qui serait pris en compte dans la projection de l'image projetée 22.
La trace 32 détectée dans l'image acquise peut être transformée de manière à obtenir une trace 32' dans un référentiel d'image non déformée par la projection de cette dernière sur l'avant-bras. L'image non déformée est nommée l'image originale comme énoncé précédemment.
La trace 32' dans l'image originale comprend un ou plusieurs pixels dans le référentiel de l'image originale.
Une étape de détermination du centre 33 de cette trace 32', ou d'un barycentre, peut être engagée pour déterminer le point d'interaction le plus vraisemblable de l'image qu'un utilisateur a souhaité activer. Le point ainsi calculé, nommé « centre d'interaction » 33, peut être un pixel de l'image.
Une étape de comparaison de la position du centre d'interaction
33 avec l'image originale permet de déterminer l'action à engager par le calculateur.
Selon une variante de réalisation, le centre d'interaction peut être calculé sur l'image acquise non encore corrigée par les facteurs de transformations. Dans ce cas, la transformée du centre d'interaction de la trace de l'image acquise permet de déterminer la position du centre d'interaction de la trace de l'image originale.
Selon un mode de réalisation, la position du centre d'interaction 33 est comparée avec une matrice de points délimitant des zones 55 ou 55' selon si l'on considère l'image acquise ou l'image originale obtenue par la transformation de l'image acquise. De telles zones 55 sont représentées en perspective à la figure 4 et superposées au faisceau 31 et sont représentées dans l'image originale à la figure 5. Des points 50 de délimitation sont définis afin de délimiter les zones d'interaction 55'.
La figure 5 représente les zones 55' dans un référentiel lié à l'image originale ainsi que les points de délimitation 50. Pour cela, l'image est délimitée en zone 55' par un quadrillage dans le référentiel lié à l'image originale. Selon un mode de réalisation, le quadrillage présente des surfaces rectangulaires identiques. Mais tout autre quadrillage est compatible du bracelet 1 de l'invention. Selon d'autres variantes de réalisation, des zones 55' formant des carrés, des losanges ou des cercles peuvent être définies. La position du centre d'interaction 33 est ainsi comparée à la position des points de délimitation 50 ou aux limites des zones 55'. Un algorithme permettant de calculer les distances du centre d'interaction 33 aux points de délimitation 50 les plus proches permet d'estimer la zone 55' qui est activée par l'utilisateur. Lorsqu'une trace est « à cheval » sur deux zones 55', le bracelet de l'invention est configuré pour déterminer la proportion de la tâche dans chacune des zones. Selon un mode de réalisation, la zone 55' comprenant le plus grand nombre de pixels de la trace 32' est déterminée comme la zone active.
Avantageusement, dans ce mode de réalisation, l'affichage de l'image comprend des zones activables dont l'activation est déterminée en fonction du calcul de la position du centre d'interaction 33 dans l'image.
La figure 5 représente des icônes 201 de l'image originale. Dans cet exemple, le calcul de la trace 32', ou de son centre 33, dans le référentiel de l'image originale peut être rapproché :
■ soit directement de la position de l'icône 201 la plus proche, donc ayant des pixels les plus proches ou en commun avec la trace 32' ;
■ soit d'une zone comprenant cette icône graphique, l'identification de la zone conduisant donc à l'identification de l'icône compris dans cette zone.
Ainsi l'utilisation des zones reste optionnelle. Lorsque la position du centre d'interaction est directement comparée avec des zones d'intérêts de l'image, il est possible de déterminer quelle action doit être engagée. L'utilisation des zones permet de rendre plus robuste la détection de points d'interaction en effectuant une comparaison simple avec la zone concernée correspondante au point d'interaction déterminée. La comparaison permet d'aboutir à une action qui est liée à l'activation de ladite zone déterminée. D'autres actions combinant différents points d'interaction 33 peuvent être détectées selon le même principe par le bracelet 1 de l'invention.
A titre d'exemple, deux points d'interaction 33 peuvent être détectés. Lorsque ces deux points d'interaction 33 effectuent un mouvement relatif l'un vers l'autre ou en s'éloignant, cela peut correspondre à un agrandissement ou à un rétrécissement de l'image à afficher ou d'une zone de l'image. Dans ce mode de réalisation, la détection de mouvements comprend la détection d'un ensemble de points d'interaction. Des vecteurs instantanés peuvent être déduits. Lorsque deux points d'interaction sont en mouvement, il est possible de comparer les sens des vecteurs instantanés et de générer une consigne d'activation d'une fonction. A cette fin, le calculateur permet par exemple d'agrandir une portion d'image ou toute l'image selon la position des centres d'interaction déterminés.
Projection d'images
La figure 3 représente le projecteur 20 projetant une image sur l'avant-bras 101 . La projection permet de déformer une image originale en appliquant des facteurs de déformations à l'image. Ces facteurs de déformations prennent en compte les effets de perspective. Ces effets de perspective peuvent prendre en compte notamment la profondeur de champ, c'est-à-dire la délimitation de l'image à afficher sur la partie la plus éloignée du bracelet 1 et prennent en compte la hauteur du projecteur vis-à-vis du plan de projection située sur la peau de l'avant-bras 101 . En outre, les facteurs de transformation d'image pour compenser les effets de perspective prennent en compte la déformation latérale de l'image, c'est-à-dire les points de l'image les plus éloignés latéralement de l'axe optique principal.
Eventuellement, les déformations prennent en compte l'anatomie de la surface de l'avant-bras ou de la main d'un utilisateur selon sa morphologie. A titre d'exemple, une morphologie moyenne ou standard est appliquée à une image projetée par le bracelet 1 et peut être ajustée selon les différentes morphologies d'utilisateurs. Des facteurs de corrections des facteurs de transformation peuvent être appliqués pour modifier les transformations appliquées à l'image projetée.
Un objectif des facteurs de transformation d'images est d'afficher une image sur l'avant-bras d'un utilisateur qui soit proche d'une image originale pour l'utilisateur. Il est alors nécessaire de compenser certaines déformations naturelles liées au mode de projection d'images et au projecteur lui-même.
Le calculateur du bracelet de l'invention peut permettre d'effectuer les calculs de traitement d'images notamment l'application des facteurs de déformation et/ou de correction. Un autre calculateur peut être utilisé pour générer les images. Selon un mode de réalisation, un même calculateur génère les images et transforme les images à partir des facteurs de déformation et/ou de correction.
Le projecteur peut un projecteur laser de type pico-projecteur laser couleur.
Selon un mode de réalisation, le projecteur d'images comprend un laser bleu, un laser rouge et un laser vert et un ensemble de micro-miroirs s'orientant de sorte à produire en chaque point de projection un point dont la couleur est générée par une combinaison des trois lasers orientés par les miroirs.
Selon un autre mode de réalisation, le projecteur d'images peut être à cet effet un projecteur de type LCOS, désignant dans la terminologie anglo-saxonne « Liquid Crystal On Silicon » et signifiant Cristaux liquide sur silicium. Cette technologie permet de mélanger une source de lumière à une source de lumière. La source de lumière peut être générée par un ou plusieurs laser(s) ou une ou plusieurs diode(s). Un écran à cristaux liquides peut être directement monté sur un composant intégré. Un prisme peut être également utilisé.
Selon un mode de réalisation, dit haute définition, le projecteur d'images émet une image dont la résolution est de 1920x2080. Second détecteur 11
Selon un mode de réalisation, le bracelet 1 comprend un second détecteur 1 1 permettant d'acquérir des images en couleur. Le second détecteur permet d'appliquer des facteurs correctifs aux transformations à appliquer à l'image projetée. Notamment, une analyse des contours de l'image projetée permet de réajuster les facteurs de transformation à appliquer à l'image projetée. Pour cela, des facteurs correctifs sont appliqués aux facteurs de transformation pour prendre en compte l'affichage réel détecté sur l 'avant-bras.
Le second détecteur 1 1 permet d'améliorer, notamment, la fonction de stabilisateur d'images. Les contours de l'image affichée 22 peuvent être régulièrement comparés à une image témoin ayant des dimensions nominales souhaitées dont les caractéristiques sont enregistrées dans une mémoire M. Cette comparaison en temps réel des dimensions de l'image affichée et celle enregistrée permet de générer des facteurs correctifs. Les facteurs de corrections peuvent donc être générés en fonction des écarts calculés par un calculateur entre deux dimensions d'images.
Ces facteurs de corrections permettent de compenser des mouvements du poignet, de la main et de l'avant-bras. En outre, ces facteurs de corrections permettent de compenser également une inclinaison du bâti lorsque le bracelet comporte du jeu autour du poignet. Les facteurs de corrections permettent d'offrir à un utilisateur une fonction de stabilisateur d'images.
En outre, les dimensions des images capturées par les deux détecteurs 10 et 1 1 peuvent être également comparées pour assurer une cohérence de la stabilisation d'images et la détection de zone interactive de l'image.
Enfin, le second détecteur 1 1 permet également d'effectuer un second calcul de détection d'un centre d'interaction ou d'une zone d'interaction. Les positions obtenues par les deux détecteurs couplés à un ou plusieurs calculateurs peuvent être corrélées afin de réduire le taux de fausses détections.
Une calibration d'image peut être définie au moyen du bracelet. La calibration d'image vise à projeter une image témoin et à appliquer des facteurs de transformation selon les souhaits d'un utilisateur. A cette fin, le bracelet de l'invention comprend une interface comprenant des boutons ou des contacteurs permettant d'appliquer des modifications des facteurs de correction ou de déformation d'image. Ainsi, la calibration permet d'assurer que l'image est affichée convenablement pour un utilisateur, c'est-à-dire dans un format sensiblement rectangulaire compensant les effets de perspectives. La calibration permet d'adapter le format de l'image à une morphologie donnée d'un utilisateur. Un avantage est de déterminer un format d'affichage et de procéder ensuite à des corrections de manière à compenser des mouvements lors de l'utilisation du bracelet. Un autre avantage est de permettre la phase de calibration à n'importe quel moment permettant ainsi de compenser des dérives ou des changements d'anatomie. Il est également possible de personnaliser l'affichage selon les utilisateurs, le bracelet pouvant être alors préconfiguré selon différentes calibrations et être ainsi utilisé par différentes personnes.
Selon un mode de réalisation, le bracelet 1 comprend un tissu qui peut se déployer sur l'avant-bras pour former un écran. Le tissu peut être intégré dans la bande 2 ou dans le bâti 3 ou encore dans le compartiment 4 qui comprend la batterie. Le tissu peut être maintenu à son extrémité par un élastique ou un second bracelet qui se fixe au bras pour le tendre.
Selon une variante de réalisation, le bracelet 1 s'étend longitudinalement par exemple au moyen d'anneaux concentriques se superposant. Un système de verrouillage et de déverrouillage permet de passer dans un mode étendu du bracelet 1 et de le verrouiller. Les anneaux sont alors conçus pour se maintenir par exemple grâce à des diamètres coopérant aux extrémités entre deux anneaux se superposant. Le dispositif d'élongation du bracelet 1 est alors similaire à un dispositif de déploiement de type « canne à pêche ». De manière similaire, les anneaux peuvent être des portions d'anneaux non fermées qui recouvrent qu'une partie de l'avant- bras. Un avantage est de former un écran se superposant à la peau de l'avant-bras. Ce mode de réalisation permet notamment de s'affranchir de la topologie de surface de l'avant-bras d'une personne, des poils et des différentes épaisseurs d'avant-bras. Appairage
Selon un mode de réalisation, le bracelet de l'invention peut être appareillé avec un équipement connecté à un réseau mobile ou terrestre tel qu'un Smartphone, une tablette ou un ordinateur. Une liaison sans fil est avantageusement exploitée pour appareiller les dispositifs entre eux. La liaison sans fil peut être établie grâce à un protocole Bluetooth ou Wifi ou tout autre protocole permettant de réaliser une telle liaison. Le bracelet de l'invention comprend à cet effet un composant radio ou réseau permettant d'établir une telle connexion. Le calculateur présent dans le bracelet de l'invention est configuré pour traiter les données reçues de l'équipement et traiter les images pour les projeter.
Selon un mode de réalisation, l'image projetée par le bracelet de l'invention est une image générée par l'équipement et transmise par la liaison sans fil au bracelet.
Selon un mode de réalisation, lorsqu'une interaction sur l'image affichée par le bracelet est détectée, le bracelet traite l'interaction indépendamment de l'équipement par exemple en offrant un menu interactif et en validant un choix de l'utilisateur ou en actionnant un bouton permettant de générer une seconde image. Pour cela, le bracelet est par exemple capable de directement générer une requête à un équipement réseau via un accès à un réseau indépendamment de l'équipement. Selon un autre cas de figures, le bracelet comprend une mémoire dans laquelle sont sauvegardées les données à afficher. D'autres interactions sont envisageables selon des variantes de réalisation qui peuvent se combiner entre elles.
Selon un autre mode de réalisation, le bracelet de l'invention est configuré pour générer une requête à l'équipement afin de traiter l'interaction détectée sur l'image affichée. Le bracelet est donc utilisé alors comme une alternative d'affichage de l'équipement tel que le Smartphone. Si par exemple un bouton affiché sur l'avant-bras est activé, la requête générée vers l'équipement permet de retourner une action ou une image au bracelet. Ce dernier sera alors en mesure de projeter le résultat de l'interaction.
Connexion réseau
Selon un mode de réalisation, le bracelet comprend un composant réseau permettant de se connecter à un réseau. La connexion peut être réalisée, par exemple, par une liaison sans fil telle qu'une liaison Wifi ou Bluetooth ou tout autre protocole permettant d'établir une liaison sans fil. A titre d'exemple, le bracelet peut être configuré pour se connecter à une box internet par l'intermédiaire d'un réseau Wifi ou un réseau mobile 3G ou 4G. Le bracelet est alors capable de générer des requêtes via la box à travers le réseau pour s'interfacer avec un serveur. Ainsi le bracelet est un bracelet connecté qui permet d'afficher par exemple un contenu numérique provenant du réseau internet. Dans ce cas de figure, une vidéo d'une plateforme vidéo peut être affichée sur l'avant-bras grâce à la réception de trames vidéos et de leur traitement par le calculateur du bracelet et du projecteur d'images. La figure 6 représente un autre mode de réalisation de l'invention dans lequel le bracelet 1 peut être apposé et/ou fixé sur un support 5 formant un socle de maintien.
Dans ce mode de réalisation, un second mode d'affichage peut être engagé par un utilisateur. L'image obtenue peut être dans ce cas de plus grande dimensions notamment obtenu par l'obtention d'une plus grande surface d'interception entre le cône 21 ' et la surface d'affichage. On note que le socle peut comprendre sa propre source d'alimentation afin d'alimenter le bracelet 1 ou de recharger la batterie 4 du bracelet 1 .
Selon un mode de réalisation, le socle comprend d'un émetteur 61 d'un faisceau infrarouge et d'un détecteur 60 permettant d'acquérir une image 62 et de détecter les points d'interaction d'un doigt dans une zone d'interactivité. Avantageusement, la zone d'interactivité est projetée de l'autre côté du bracelet 1 vis-à-vis de a projection d'image 22 comme cela est représenté à la figure 5.
L'utilisateur peut donc se servir de son doigt comme d'une souris pour animer un curseur s'affichant sur l'image ou pour activer une zone de l'image 22. Ainsi, un utilisateur n'a pas besoin d'interférer avec l'image projetée avec sa main pour interagir avec l'image. Le calculateur K permet de prendre en compte les mouvements ou les actions menées d'un doigt interagissant sur la zone d'interactivité 62 pour générer des actions sur l'image 22 à afficher. Parmi les actions que le calculateur peut engager, on trouve notamment selon l'invention : une modification de l'image, une validation d'un choix pour générer une requête auprès d'un serveur par exemple, la génération d'une nouvelle image, l'activation d'un menu ou d'un bouton, etc.
Ce mode de réalisation est particulièrement avantageux pour une projection sur un mur, une tablette de train ou d'avion. Elle permet en outre de stabiliser l'image et d'offrir un confort de visionnage amélioré. Les figures 7A à 7E représentent un exemple de correction d'image et du calcul des facteurs de corrections appliquées à l'image projetées.
La figure 7A représente une image à projeter par le calculateur. L'image peut être encodée dans un format de compression tel que le format jpeg ou tout autre format. Dans cet exemple, l'image indique une heure « 13:37 » ainsi qu'une symbologie représentant des cercles. L'image est représentée non déformée dans un rectangle muni de repères A, B, C, D, E, F, G, H.
Le calculateur applique des facteurs de transformations de l'image de sorte à projeter une image déformée. Cette image déformée vise à compenser la déformation liée à la géométrie de l'optique de manière à ce qu'un utilisateur observe une image non déformée s'affichant sur son avant- bras.
Pour cela, le calculateur effectue une première rotation de l'image de 90° dans le sens antihoraire. Une déformation trapézoïdale est alors appliquée. Les facteurs de déformation appliqués correspondent à une calibration lors de la première utilisation. Lors de cette calibration, une image de référence a été enregistrée dans une mémoire du bracelet.
La figure 7B représente une image transformée par le calculateur du bracelet avec les facteurs de déformations enregistrés dans une mémoire du bracelet suite à la calibration lors de la première utilisation.
Les figures 7C et 7D représentent schématiquement la projection de l'image du projecteur du bracelet sur un poignet en vue de coupe et en vue de dessus. Les transformations de l'image projetée permettent de compenser :
■ les effets liés à l'angle relativement faible de projection entre l'axe du bras et l'axe de projection et ;
■ les effets liés au cône de projection induisant un élargissement de l'image projetée le long du bras. La figure 7E représente l'image capturée par une caméra du bracelet. Cette image est comparée à une image de référence mémorisée dans une mémoire du bracelet. L'image de référence est une mire de calibration dont certains points caractéristiques peuvent être repérés pour mesurer par exemple les déformations liées à la topologie de la surface d'affichage, c'est-à-dire la morphologie du bras. Lors de l'utilisation du bracelet, c'est-à-dire lors de l'affichage et l'acquisition d'images, un mécanisme de correction en temps réel est appliqué. Ce mécanisme de correction vise à prendre en compte non seulement les déformations liées à la morphologie du bras et/ou du poignet mais également les déformations liées aux mouvements du bras et aux déformations liées au contexte d'usage. Des facteurs de corrections sont donc calculés en temps réel pour adapter les facteurs de déformations en temps réel.
L'image acquise est corrigée en fonction de l'image de référence en temps réel. Un pilote d'affichage peut être installé pour prendre en charge les fonctions de comparaison d'images et d'application des facteurs de transformations corrigés ou non.
Les déformations et les corrections des déformations mesurées en temps réel permettent de projeter une image compensant ces déformations de sorte que l'utilisateur puisse observer des images les moins déformées possibles dynamiquement.
Pour effectuer les comparaisons d'images acquises avec l'image de référence, selon un exemple de réalisation, les longueurs A-C, C-E, E-G et G-A sont comparées entre les deux images. Lorsque ces mesures ne coïncident pas à une tolérance près entre celles de l'image de référence et l'image acquise, un facteur de correction est calculé pour chaque valeur des longueurs mesurées de l'image pour corriger les nouveaux facteurs de transformation. Les nouveaux facteurs de transformation sont obtenus à partir des facteurs de transformation calculés lors de la calibration ou la première utilisation et des facteurs de corrections calculés dynamiquement lors de l'acquisition des images projetées.
Les déformations de l'image à projeter prennent donc en compte l'affichage de l'image en cours. Ainsi, l'image projetée est continuellement et automatiquement transformée pour que l'utilisateur observe une image non déformée. Selon une alternative de réalisation, une « image témoin » est émise dans le flux des images projetées par le projecteur pour l'utilisateur. L'image témoin est une image générée par le processeur et utilisée pour calculer les facteurs de corrections. En revanche, elle n'a aucune valeur pour l'observateur. Un intérêt est de bénéficier d'une image conçue pour la calibration, c'est-à-dire qu'elle est générée avec un contraste permettant de détourer les bordures de l'image quel que soit les conditions de luminosité ambiante ou de luminosité intrinsèque de l'image projetée. A titre d'exemple, l'image témoin peut être une image sensiblement opaque ou sombre ou noire. En effet, l'image témoin est générée de telle sorte qu'elle offre un contraste permettant de délimiter les lignes de fuites du trapèze, voir la bordure proximale de l'image projetée images vis-à-vis du détecteur et la bordure la plus éloignée du détecteur, les deux bordures étant sécantes avec les lignes de fuite du trapèze plus ou moins déformée de l'image projetée.
Un avantage est que l'image témoin est insérée dans un flux continu d'images projetées à une fréquence donnée de telle sorte qu'elle est invisible pour l'œil d'un utilisateur. A titre d'exemple, si la fréquence de rafraîchissement des images projetées est comprise entre 13 et 30 images par secondes, l'émission d'une image témoin dans une fenêtre d'une seconde est quasiment imperceptible pour l'observateur. L'image témoin peut être émise à un instant connu dans le flux d'images émises, par exemple, il peut s'agir de la dernière image d'une séquence de 24 images par seconde émise. Une telle image peut être émise régulièrement à des temps prédéfini vis-à-vis du flux d'images émis. Par exemple, l'image témoin peut être émise à des instants réguliers, comme par exemple toutes les 2s. Avantageusement, le bracelet comprend une horloge permettant d'horodater la génération des images témoins à transmettre et de les insérer dans le flux d'images projeté.
Un avantage de l'usage d'une image témoin, est qu'elle permet de réaliser une calibration dynamique des facteurs de transformation par le calcul des formes géométriques déformées de cette image affichée sur l'avant-bras. Afin que les facteurs de corrections des facteurs de transformation soient calculés de manière optimisée, l'image témoin permet de diminuer les erreurs d'interprétation des formes géométriques des d'images capturées.
Selon un mode de réalisation, une déformation peut être obtenue par le placement d'un point de vue en 3D à partir d'une librairie OpenGL. Le calculateur déplace, par calcul, virtuellement le point de vue d'une valeur correspondante au déplacement observé lors de la mesure. La figure 8 représente trois cas de détections de deux images par deux détecteurs différents du bracelet. Une première image 71 est détectée par un détecteur du bracelet telle qu'une caméra couleur. Une seconde image 72 est détectée par un détecteur infrarouge du bracelet. Les détecteurs peuvent être par exemple des caméras.
L'image 70 représente l'image de la figure 7A calculée par le calculateur sans déformation. Il s'agit de l'image à laquelle le calculateur appliquera des facteurs de corrections pour compenser les effets d'affichage afin que l'utilisateur observe une image non déformée.
Une première détection D1 permet aux deux détecteurs d'acquérir respectivement une première image 71 et une seconde image 72. Dans cette première détection, aucune interaction n'est détectée. En effet, l'image colorimétrique 71 acquise par le détecteur couleur est comparée à l'image à affichée aux facteurs de transformations près. Chaque zone de l'image n'a subie aucune modification de couleurs. Par ailleurs, l'image 72 ne comprend pas de trace. Le détecteur infrarouge ne détecteur donc aucune variation de lumière. On note que pour un détecteur infrarouge, la trace d'un doigt laisse une trace blanche sur l'image acquise.
Le calculateur déduit à partir d'opérations de comparaisons entre les images affichées et les images acquises qu'aucune interaction n'a eu lieu. La figure 8 illustre une seconde détection D2 réalisée peu de temps après la première détection D1 . Un doigt 103 d'un utilisateur rentre dans le champ de l'image colorimétrique 71 mais n'intercepte pas le faisceau infrarouge, c'est-à-dire le faisceau infrarouge se superposant à l'image sur une portion du bras.
Le calculateur du bracelet effectue continuellement des opérations de comparaisons entre les images affichées et les images détectées par les deux détecteurs. Le calculateur, par analyse des images 71 projetées et capturées, détecte une variation de couleur dans une portion de l'image. Automatiquement, une opération de corrélation s'effectue par le calculateur avec le résultat de la comparaison des images infrarouges projetée et acquise. Or dans ce cas, aucune modification de l'image 72 infrarouge n'est détectée par le calculateur. Dans le cas de la détection D2, l'image infrarouge 72 n'a pas été modifiée, le doigt 103 n'ayant pas intercepté le faisceau infrarouge. Le calculateur ne génère donc pas d'indicateur de détection d'un point d'interaction sur une portion de l'image affichée. En effet, l'algorithme de détection permet de différencier un cas de mouvement dans l'image sans interaction avec elle d'un cas où une zone d'interaction avec l'image est engagée par l'utilisateur.
Une troisième détection D3 illustre le cas où une détection d'un point d'interaction est réalisée par le calculateur. Le doigt 103 dessine une forme sur l'image colorimétrique 71 capturée. Par ailleurs, l'analyse de l'image 72 permet de détecter une tache 32 correspondant à la zone dans laquelle le doigt intercepte le faisceau infrarouge. Lorsque le calculateur détecte une variation de l'image colorimétrique correspondant à une détection d'une tache sur l'image capturée par le détecteur infrarouge, alors ce dernier génère un indicateur de détection d'une zone d'interaction.
Dans ce cas, selon un mode de réalisation, le centre de la zone d'interaction peut être calculé et l'action interactive correspondant à la zone touchée par le doigt peut être générée conformément à l'invention. Cela peut se traduire, par exemple, par l'affichage d'une autre image sur le bras de l'utilisateur.
Selon un exemple de réalisation, la détection peut être réalisée en temps réel en moins de 300 ms par l'analyse effectuée par le calculateur des deux images acquises par chaque détecteur. Les opérations de comparaisons d'images sont réalisées par le calculateur continuellement de manière à générer automatiquement des actions interactives selon la zone de détection du point d'interaction.

Claims

REVENDICATIONS
Bracelet électronique (1 ) pour l'affichage d'un contenu numérique interactif destiné à être projeté sur une zone d'un bras ou d'un avant- bras (1 00, 101 ), caractérisé en ce qu'il comprend :
■ Un émetteur (30) d'un faisceau lumineux (31 ) dans une bande de fréquence non visible formant une nappe lumineuse destinée à couvrir une première zone (Z-i) d'un bras (101 , 1 02) ;
■ Un projecteur (20) projetant une image (22) sur une seconde zone (Z2), la première zone (Z-i) se superposant sensiblement à la seconde zone (Z2) ;
■ Un premier détecteur (1 0) capturant une image de la seconde zone (Z2) ;
■ Un calculateur (K) déterminant au moins une position d'au moins un point d'interaction (33) du faisceau lumineux (31 ) par l'analyse d'une trace (32) de l'image acquise par le premier détecteur (10).
Bracelet selon la revendication 1 , caractérisé en ce qu'il comprend une bande (2) destinée à être maintenue autour d'un poignet (1 02), une source d'alimentation (4) et un bâti (3) agencée et maintenue sur une partie supérieure du bracelet (1 ), ledit bâti (3) comportant l'émetteur (30), le projecteur (20), le premier détecteur (1 0) et le calculateur (K).
Bracelet selon l'une quelconque des revendications 1 à 2, caractérisé en ce qu'il comprend :
■ Un composant permettant d'appliquer des facteurs mathématiques de déformations à l'image projetée pour compenser :
o une déformation de surface liée à l'anatomie de l'avant- bras et/ou ;
o une déformation de perspective prenant en considération : ■ des déformations latérales de l'image projetée (22) ;
■ des déformations de profondeur de champ de l'image projetée.
Bracelet selon l'une des revendications 1 à 3, caractérisé en ce que l'émetteur (30) du faisceau lumineux est un émetteur infrarouge.
Bracelet selon l'une des revendications 1 à 4, caractérisé en ce que l'émetteur (30) est un émetteur linéaire projetant un faisceau lumineux sensiblement plan.
Bracelet selon l'une des revendications 1 à 5, caractérisé en ce que l'émetteur (30) est agencé sur le bâti (3) dans une position située entre le projecteur (20) et la bande (2) du bracelet (1 ).
Bracelet selon la revendication 1 , caractérisé en ce que le premier détecteur (10) comprend une gamme de sensibilité permettant de détecter une trace causée par une interception du faisceau lumineux (31 ) avec un corps.
Bracelet selon la revendication 7, caractérisé en ce que le premier détecteur (10) est un détecteur infrarouge capturant une image dans laquelle le faisceau lumineux forme une image dont les dimensions longitudinales, c'est-à-dire dans le sens de projection, sont identifiables.
Bracelet selon la revendication 1 , caractérisé en ce que la position d'au moins un point d'interaction (33) est calculée à partir :
• d'une transformation de l'image et de la trace acquises en une image originale comprenant une image de la trace à partir des facteurs de transformation ;
• d'une construction géométrique d'un point d'interaction d'au moins une trace (32) ou image de la trace (32').
10. Bracelet selon la revendication 9, caractérisé en ce que le calculateur compare la position du point d'interaction (33) avec une matrice de points délimitant des zones d'interaction dans un référentiel lié à l'image originale, le calculateur déduisant une probabilité d'interaction avec zone d'interaction (55').
1 1 . Bracelet selon la revendication 1 , caractérisé en ce qu'il comprend en outre un second détecteur (1 1 ) captant des images colorimétriques de la seconde zone (Z2).
12. Bracelet selon la revendication 1 1 , caractérisé en ce qu'il comprend un stabilisateur d'images, ledit stabilisateur d'images comparant les images acquises par le second détecteur (1 1 ) avec des dimensions d'une image de référence et générant des facteurs correctifs à appliquer aux facteurs de déformations d'image en fonction de la comparaison desdites images.
13. Bracelet selon la revendication 1 1 , caractérisé en ce que le stabilisateur d'images compare les dimensions longitudinales de la seconde zone (Z2) des images acquises par le premier détecteur (10) avec les dimensions d'au moins une image acquise par le second détecteur (1 1 ) pour générer des facteurs de corrections à appliquer aux facteurs de transformation. 14. Bracelet selon l'une quelconque des revendications 1 à 13, caractérisé en ce que le calculateur génère une image témoin et que le projecteur (20) projette régulièrement dans le flux d'images projetées ladite image témoin, la dite image témoin étant acquise par au moins un détecteur (10, 1 1 ) du bracelet de manière comparer des dimensions caractéristiques de l'image acquise avec une image de référence pour calculer des facteurs de corrections d'images.
15. Bracelet selon l'une quelconque des revendications 12 à 14, caractérisé en ce que l'image de référence est calculée lors d'une opération de calibration ou de première utilisation, l'image de référence étant obtenue par l'application de facteurs de transformation à une image projetée pour obtenir une image affichée dont les dimensions sont souhaitées, c'est-à-dire ayant une forme sensiblement rectangulaire, l'application des facteurs de transformation lors de cette opération étant réalisée à partir d'une interface du bracelet.
16. Bracelet selon l'une quelconque des revendications 1 1 à 15, caractérisé en ce que le second détecteur (1 1 ) effectue un second calcul d'un point d'interaction par l'analyse d'une trace interceptant l'image, ladite trace étant obtenue par une analyse d'une modification de la couleur des pixels d'une portion de l'image acquise.
17. Bracelet selon la revendication 1 6, caractérisé en ce qu'un calculateur corrèle la position d'un point d'interaction obtenue à partir d'une image acquise par le premier détecteur (10) et la position d'un point d'interaction obtenue à partir d'une image acquise par le second détecteur (1 1 ), la corrélation des positions permettant de générer une nouvelle position d'un point d'interaction.
18. Bracelet selon l'une des revendications 1 à 17, caractérisé en ce que le projecteur d'images (20) est un pico-projecteur couleur.
19. Bracelet selon la revendication 18, caractérisé en ce que le projecteur d'images comprend un laser bleu, un laser rouge et un laser vert et un ensemble de micro-miroirs s'orientant de sorte à produire en chaque point de projection un point dont la couleur est générée par une combinaison des trois lasers orientés par les miroirs. 20. Bracelet selon l'une des revendications 1 à 19, caractérisé en ce qu'il comprend un accéléromètre et un gyroscope permettant d'activer des fonctions générant une modification ou un changement de l'image projeté par le projecteur (20). 21 . Dispositif de projection comprenant un bracelet (1 ) selon l'une des caractéristiques des revendication 1 à 20, caractérisé en ce qu'il comprend un socle (5) comprenant des moyens de maintien du bracelet (1 ), le calculateur (K) du bracelet (1 ) comprenant un second mode de projection comprend des seconds facteurs de déformations d'images permettant une projection d'images sur second plan de projection, le second plan de projection étant confondu avec le plan de support du socle (5).
22. Dispositif de projection selon la revendication 21 , caractérisé en ce que le socle (5) comprend un émetteur d'un faisceau infrarouge sensiblement plan (61 ) et un détecteur (60) disposés sur la face opposée à la face du support (5) en regard de la projection d'image (22) du projecteur (20), ledit détecteur (60) enregistrant des images (62) comprenant au moins une trace d'interaction lorsque le faisceau est intercepté par un corps, le calculateur (K) générant des consignes d'interaction modifiant l'image (22) projetée en fonction d'une zone d'interaction détectée.
EP16719037.0A 2015-04-10 2016-04-08 Bracelet electronique pour l'affichage d'un contenu numerique interactif destine a etre projete sur une zone d'un bras Withdrawn EP3281093A1 (fr)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
FR1553161A FR3034889B1 (fr) 2015-04-10 2015-04-10 Bracelet electronique pour l’affichage d’un contenu numerique interactif destine a etre projete sur une zone d’un bras
PCT/EP2016/057848 WO2016162538A1 (fr) 2015-04-10 2016-04-08 Bracelet electronique pour l'affichage d'un contenu numerique interactif destine a etre projete sur une zone d'un bras

Publications (1)

Publication Number Publication Date
EP3281093A1 true EP3281093A1 (fr) 2018-02-14

Family

ID=53541762

Family Applications (1)

Application Number Title Priority Date Filing Date
EP16719037.0A Withdrawn EP3281093A1 (fr) 2015-04-10 2016-04-08 Bracelet electronique pour l'affichage d'un contenu numerique interactif destine a etre projete sur une zone d'un bras

Country Status (4)

Country Link
US (1) US20180113569A1 (fr)
EP (1) EP3281093A1 (fr)
FR (1) FR3034889B1 (fr)
WO (1) WO2016162538A1 (fr)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
HUE059960T2 (hu) * 2016-12-07 2023-01-28 Flatfrog Lab Ab Ívelt érintésérzékelõ eszköz
EP4104042A1 (fr) 2020-02-10 2022-12-21 FlatFrog Laboratories AB Appareil de détection tactile amélioré
CN112716117B (zh) * 2020-12-28 2023-07-14 维沃移动通信有限公司 智能手环及其控制方法
DE102021114661A1 (de) 2021-01-29 2022-08-04 Sean Grant Tragbare biometrische Vorrichtung
US11847256B2 (en) * 2022-03-04 2023-12-19 Humane, Inc. Presenting and aligning laser projected virtual interfaces
DE102022108131B3 (de) 2022-04-05 2023-10-05 Audi Aktiengesellschaft Tragbares Accessoire mit einer Anzeigeeinrichtung, Verfahren zum Betreiben eines tragbaren Accessoires, und Steuereinrichtung
CN117218114B (zh) * 2023-11-06 2024-01-30 山东滨州安惠绳网集团有限责任公司 一种基于图像数据处理的网状织物缺陷快速检测方法

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005533463A (ja) * 2002-06-26 2005-11-04 ヴイケイビー・インコーポレーテッド 多機能統合画像センサおよび仮想インタフェース技術への適用
ATE488091T1 (de) * 2004-08-30 2010-11-15 Univ Weimar Bauhaus Verfahren und vorrichtung zur darstellung eines digitalen bildes auf einer geometrisch und photometrisch nicht-trivialen oberfläche
US9241143B2 (en) * 2008-01-29 2016-01-19 At&T Intellectual Property I, L.P. Output correction for visual projection devices
JP5256899B2 (ja) * 2008-07-18 2013-08-07 セイコーエプソン株式会社 画像補正装置、画像補正方法、プロジェクタおよびプロジェクションシステム
US20100110264A1 (en) * 2008-10-31 2010-05-06 Lucent Technologies, Inc. Image projection system
US9569001B2 (en) * 2009-02-03 2017-02-14 Massachusetts Institute Of Technology Wearable gestural interface
US8727539B2 (en) * 2010-10-28 2014-05-20 Seiko Epson Corporation Projector and method of controlling projector
US9686388B2 (en) * 2011-05-13 2017-06-20 Rohm Co., Ltd. Projector
GB201205303D0 (en) * 2012-03-26 2012-05-09 Light Blue Optics Ltd Touch sensing systems
ITTO20120756A1 (it) * 2012-08-31 2014-03-01 St Microelectronics Srl Dispositivo pico-proiettore stabilizzato e relativo metodo di stabilizzazione di immagine
JP6155448B2 (ja) * 2012-11-01 2017-07-05 アイカム エルエルシー ３ｄ撮像し、マッピングし、ネットワーク化しおよびインタフェースするための無線手首コンピューティングおよびコントロールするデバイスおよび方法
KR101999958B1 (ko) * 2013-05-22 2019-07-15 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
JP2015041052A (ja) * 2013-08-23 2015-03-02 ソニー株式会社 リストバンド型情報処理装置および記憶媒体
JP6274839B2 (ja) * 2013-12-04 2018-02-07 キヤノン株式会社 画像処理装置、画像処理方法
US9369658B2 (en) * 2014-01-20 2016-06-14 Lenovo (Singapore) Pte. Ltd. Image correction of surface projected image
CN106133644B (zh) * 2014-04-01 2019-03-15 索尼公司 使投影用户界面协调
KR102029756B1 (ko) * 2014-11-03 2019-10-08 삼성전자주식회사 웨어러블 디바이스 및 그 제어 방법
KR102347248B1 (ko) * 2014-11-26 2022-01-04 삼성전자주식회사 터치 제스쳐 인식 방법 및 장치

Also Published As

Publication number Publication date
FR3034889B1 (fr) 2017-04-28
WO2016162538A1 (fr) 2016-10-13
FR3034889A1 (fr) 2016-10-14
US20180113569A1 (en) 2018-04-26

Similar Documents

Publication Publication Date Title
EP3281093A1 (fr) Bracelet electronique pour l'affichage d'un contenu numerique interactif destine a etre projete sur une zone d'un bras
FR3053509B1 (fr) Procede d’occultation d’un objet dans une image ou une video et procede de realite augmentee associe
US9864430B2 (en) Gaze tracking via eye gaze model
KR102313256B1 (ko) 복수의 광원들과 센서들을 사용한 눈 시선 검출
US11128817B2 (en) Parallax correction using cameras of different modalities
US10275855B2 (en) Image demosaicing for hybrid optical sensor arrays
US10339631B2 (en) Image demosaicing for hybrid optical sensor arrays
US9123272B1 (en) Realistic image lighting and shading
WO2015154882A1 (fr) Systèmes et procédés d'étalonnage de suivi oculaire
FR3011952A1 (fr) Procede d'interaction par le regard et dispositif associe
WO2015007784A1 (fr) Procédé de détermination de mesures oculaires avec un capteur grand public
US11451760B2 (en) Systems and methods for correcting rolling shutter artifacts
FR2996014A1 (fr) Procede d'aide a la determination de parametres de vision d'un sujet
WO2016162539A1 (fr) Dispositif electronique de projection interactif
US9449427B1 (en) Intensity modeling for rendering realistic images
US20210203910A1 (en) Switchable fringe pattern illuminator
EP3401837A1 (fr) Dispositif de capture d'empreintes
EP3145405B1 (fr) Procédé de détermination d'au moins un paramètre comportemental
US11785199B2 (en) SPAD array for intensity image capture and time of flight capture
US11516452B2 (en) Systems and methods for temporal corrections for parallax reprojection
US11768926B2 (en) Method of textured contact lens detection
US20240094390A1 (en) Indirect time of flight sensor with parallel pixel architecture
FR3069681A1 (fr) Procede et dispositif de capture d'image d'iris

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20171108

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20191101