FR2990286A1 - Procede d'affichage en realite augmentee d'une information relative a un equipement cible sur un ecran d'un dispositif electronique, produit programme d'ordinateur, dispositif electronique et equipement electrique associes - Google Patents
Procede d'affichage en realite augmentee d'une information relative a un equipement cible sur un ecran d'un dispositif electronique, produit programme d'ordinateur, dispositif electronique et equipement electrique associes Download PDFInfo
- Publication number
- FR2990286A1 FR2990286A1 FR1254179A FR1254179A FR2990286A1 FR 2990286 A1 FR2990286 A1 FR 2990286A1 FR 1254179 A FR1254179 A FR 1254179A FR 1254179 A FR1254179 A FR 1254179A FR 2990286 A1 FR2990286 A1 FR 2990286A1
- Authority
- FR
- France
- Prior art keywords
- equipment
- image
- electronic device
- target equipment
- electrical
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 36
- 238000004590 computer program Methods 0.000 title claims description 5
- 238000012545 processing Methods 0.000 claims abstract description 17
- 230000010365 information processing Effects 0.000 claims abstract description 15
- 230000004048 modification Effects 0.000 claims abstract description 13
- 238000012986 modification Methods 0.000 claims abstract description 9
- 238000004891 communication Methods 0.000 claims description 18
- 230000007547 defect Effects 0.000 claims description 10
- 230000005540 biological transmission Effects 0.000 claims description 9
- 238000010586 diagram Methods 0.000 claims description 6
- 238000009429 electrical wiring Methods 0.000 claims description 5
- 230000003190 augmentative effect Effects 0.000 description 24
- 238000012790 confirmation Methods 0.000 description 8
- 239000003550 marker Substances 0.000 description 5
- 230000004044 response Effects 0.000 description 4
- 239000000470 constituent Substances 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/18—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form
- G05B19/406—Numerical control [NC], i.e. automatically operating machines, in particular machine tools, e.g. in a manufacturing environment, so as to execute positioning, movement or co-ordinated operations by means of programme data in numerical form characterised by monitoring or safety
- G05B19/4069—Simulating machining process on screen
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/30—Nc systems
- G05B2219/32—Operator till task planning
- G05B2219/32014—Augmented reality assists operator in maintenance, repair, programming, assembly, use of head mounted display with 2-D 3-D display and voice feedback, voice and gesture command
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Graphics (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Ce procédé permet d'afficher, sur un écran (20) d'un dispositif électronique (10), une information relative à un équipement cible (12), le dispositif électronique (10) comportant un capteur d'images (24), l'écran (20), des moyens (22) d'affichage de données à l'écran (20), et une unité de traitement d'informations (26). Le procédé d'affichage comprend les étapes suivantes : - l'acquisition, par le capteur d'images (24), d'au moins une image de l'équipement cible (12), - l'identification de l'équipement cible (12) par l'unité de traitement (26, 54), - la modification, par l'unité de traitement (26, 58), de l'image acquise en une image enrichie, par superposition à l'image acquise de l'information relative à l'équipement cible (12) identifié, et - l'affichage, par les moyens d'affichage (22), de l'image enrichie à l'écran (20). Le procédé d'affichage comprend en outre la détermination, par l'unité de traitement (26, 56), de points caractéristiques de l'équipement cible (12) dans l'image acquise. Lors de l'étape d'identification, l'équipement cible (12) est reconnu via un code unique (32) associé à l'équipement (12), et lors de l'étape de modification, l'information superposée à l'image acquise est en outre positionnée par rapport aux points caractéristiques déterminés.
Description
Procédé d'affichage en réalité augmentée d'une information relative à un équipement cible sur un écran d'un dispositif électronique, produit programme d'ordinateur, dispositif électronique et équipement électrique associés La présente invention concerne un procédé d'affichage, sur un écran d'un dispositif, d'une information relative à un équipement cible, le dispositif électronique comportant un capteur d'images, l'écran, des moyens d'affichage de données à l'écran, et une unité de traitement d'informations. Le procédé d'affichage comprend les étapes suivantes : - l'acquisition, par le capteur d'images, d'au moins une image de l'équipement cible, - l'identification de l'équipement cible par l'unité de traitement, - la modification, par l'unité de traitement, de l'image acquise en une image enrichie, par superposition à l'image acquise de l'information relative à l'équipement cible identifié, et - l'affichage, par les moyens d'affichage, de l'image enrichie à l'écran. L'invention concerne également un produit programme d'ordinateur comportant des instructions logicielles destinées à mettre en oeuvre un tel procédé. L'invention concerne également un dispositif électronique et un équipement électrique pour la mise en oeuvre d'un tel procédé d'affichage. On connaît du document WO 2008/112149 A2 un procédé d'affichage du type précité. Un tel procédé d'affichage, à l'écran du dispositif électronique, d'une image enrichie avec des informations relatives à l'équipement, à partir d'une image dudit équipement acquise par le capteur d'images du dispositif électronique, est généralement connu sous le nom de réalité augmentée. L'équipement cible comporte différents capteurs d'acquisition de signaux relatifs à l'environnement autour de l'équipement cible. L'équipement cible comporte également un capteur de positionnement de l'équipement cible par rapport au dispositif électronique. Les signaux relatifs à l'environnement de l'équipement cible et la position de l'équipement cible par rapport au dispositif électronique sont ensuite transmis à une unité de traitement d'informations traitant les images destinées à être affichées ultérieurement à l'écran du dispositif électronique. Toutefois, les traitements effectués par l'unité de traitement associée au dispositif électronique sont relativement longs, et l'image affichée à l'écran du dispositif électronique présente une certaine latence par rapport à ce que l'utilisateur observe par ailleurs. Autrement dit, le temps de réponse du système et du procédé d'affichage n'est pas optimal. Le but de l'invention est donc de proposer un procédé d'affichage permettant d'améliorer le temps de réponse pour l'affichage de l'image enrichie par rapport à l'acquisition initiale de l'image de l'équipement via le capteur d'images. A cet effet, l'invention a pour objet un procédé d'affichage du type précité, caractérisé en ce qu'il comprend en outre l'étape suivante : - la détermination, par l'unité de traitement, de points caractéristiques de l'équipement cible dans l'image acquise, et en ce que lors de l'étape d'identification, l'équipement cible est reconnu via un code unique associé à l'équipement, et lors de l'étape de modification, l'information superposée à l'image acquise est en outre positionnée par rapport aux points caractéristiques déterminés. Suivant d'autres aspects avantageux de l'invention, le procédé d'affichage comprend une ou plusieurs des caractéristiques suivantes, prises isolément ou suivant toutes les combinaisons techniquement possibles : - lors de l'étape d'identification, une image du code unique associé à l'équipement, tel qu'un code OR ou un code à barres, est acquise par le capteur d'images, et l'unité de traitement identifie l'équipement par reconnaissance du code à l'aide de l'image du code acquise ; - lors de l'étape d'identification, l'équipement cible est identifié en l'absence de la localisation du dispositif électronique à l'aide d'un capteur de positionnement contenu dans le dispositif électronique ; - lors de l'étape de détermination, les points caractéristiques de l'équipement cible sont déterminés par reconnaissance du contour de l'équipement et/ou de la position d'élément(s) de l'équipement ; - lors de l'étape de modification, le positionnement de l'information superposée est effectué à l'aide d'un premier repère de coordonnées lié à l'équipement cible, d'un deuxième repère de coordonnées lié à l'information superposée et d'un troisième repère de coordonnées lié au dispositif électronique ; - le dispositif électronique comporte en outre des premiers moyens de communication avec un serveur distant via une première liaison de données, et l'information relative à l'équipement cible comporte des données reçues depuis le serveur distant via les premiers moyens de communication ; - le dispositif électronique comporte en outre des deuxièmes moyens de communication avec l'équipement cible via une deuxième liaison de données, et l'information relative à l'équipement cible comporte des données, notamment des données relatives au fonctionnement de l'équipement cible, reçues depuis l'équipement cible via les deuxièmes moyens de communication ; et - l'équipement cible est un équipement électrique, et l'information relative à l'équipement électrique comporte au moins un élément parmi le groupe constitué de : le schéma de câblage électrique ; la date de mise en service ; la date de dernière révision ; l'historique des révisions effectuées ; la référence de chacun des appareils électriques constituant l'équipement ; la puissance électrique consommée, la tension électrique et la température pour chacun des appareils électriques constituant l'équipement ; la présence d'un défaut pour chacun des appareils électriques constituant l'équipement, l'état de chacun des appareils électriques de protection appartenant à l'équipement, tel que contact fermé ou ouvert et appareil déclenché ou non, et la liste des actions à réaliser pour corriger un défaut d'un appareil électrique de l'équipement. L'invention a également pour objet un produit programme d'ordinateur comportant des instructions logicielles qui, lorsque mises en oeuvre par une unité de traitement d'informations intégrée à un dispositif électronique, met en oeuvre le procédé tel que défini ci-dessus. L'invention a également pour objet un dispositif électronique comprenant un capteur d'images, un écran, des moyens d'affichage de données à l'écran, et une unité de traitement d'informations comportant des moyens d'identification d'un équipement cible, des moyens de modification d'une image acquise par le capteur d'images en une image enrichie, les moyens de modification étant propres à superposer, à l'image acquise, une information relative à l'équipement cible identifié, les moyens d'affichage étant propres à afficher l'image enrichie à l'écran, caractérisé en ce que l'unité de traitement d'informations comporte en outre des moyens de détermination de points caractéristiques de l'équipement cible dans l'image acquise, en ce que les moyens d'identification sont propres à reconnaitre l'équipement cible via un code unique associé à l'équipement, et en ce que les moyens de modification sont propres positionner, par rapport aux points caractéristiques déterminés, l'information superposée à l'image acquise. Suivant un autre aspect avantageux de l'invention, le dispositif électronique est un téléphone portable ou une tablette électronique. L'invention a également pour objet un équipement électrique comprenant une armoire de protection, au moins un appareil électrique disposé dans l'armoire, une base de données apte à stocker des données relatives au fonctionnement du ou de chaque appareil électrique, et des moyens de transmission de données à destination d'un dispositif électronique externe, caractérisé en ce qu'il comprend en outre un code unique agencé sur une face extérieure de l'armoire et propre à permettre l'identification de l'équipement par le dispositif électronique externe, et en ce que les moyens de transmission sont propres à envoyer, audit dispositif externe, les données relatives au fonctionnement stockées dans la base de données, lesdites données étant destinées à être superposées à une image de l'équipement acquise par le dispositif externe pour former une image enrichie affichée sur un écran dudit dispositif externe. Suivant un autre aspect avantageux de l'invention, l'équipement électrique comprend la caractéristique suivante : - le code unique est un élément parmi le groupe constitué des éléments suivants : un code OR, un code à barres et un code d'identification contenu dans une clé électronique d'identification agencée sur la face extérieure, la clé électronique d'identification étant propre à communiquer le code d'identification via une communication en champ proche. Ces caractéristiques et avantages de l'invention apparaîtront à la lecture de la description qui va suivre, donnée uniquement à titre d'exemple non limitatif, et faite en référence aux dessins annexés, sur lesquels : - la figure 1 est une représentation schématique d'un dispositif électronique selon l'invention, comportant un capteur d'images, un écran, des moyens d'affichage de données à l'écran et une unité de traitement d'informations, et communiquant avec un équipement cible selon l'invention, - la figure 2 est un organigramme du procédé d'affichage selon l'invention, - la figure 3 est une vue schématique représentant des repères de coordonnées associés à l'équipement cible et au dispositif électronique de la figure 1, afin de positionner une information à superposer en réalité augmentée à une image de l'équipement cible acquise par le capteur d'images du dispositif électronique, et - les figures 4 à 12 sont des vues de différentes images affichées à l'écran du dispositif électronique lors de la mise en oeuvre du procédé d'affichage selon l'invention. Sur la figure 1, un dispositif électronique 10 est destiné à afficher en réalité augmentée une image enrichie I, d'un équipement cible 12, l'image enrichie le étant propre à être obtenue par superposition, à une image I, acquise par le dispositif électronique, d'une information relative à l'équipement cible 12.
En complément, le dispositif électronique 10 est relié à l'équipement cible 12 par une première liaison de données 14. En complément, le dispositif électronique 10 est relié à un serveur distant 16 par une deuxième liaison de données 18.
Le dispositif électronique 10 comprend un écran 20, des moyens 22 d'affichage de données à l'écran 20, un capteur d'images 24 et une unité de traitement d'informations 26. En complément, le dispositif électronique 10 comprend un émetteur-récepteur radioélectrique 28.
Le dispositif électronique 10 comprend également des moyens 30 d'alimentation en énergie électrique des éléments constitutifs du dispositif électronique, notamment de l'écran 20, des moyens d'affichage 22, du capteur d'images 24, de l'unité de traitement d'informations 26 et en complément de l'émetteur-récepteur radioélectrique 28. Le dispositif électronique 10 est de préférence un dispositif électronique portatif.
Le dispositif électronique 10 est, par exemple, un téléphone portable, tel qu'un ordiphone (de l'anglais smartphone). En variante, le dispositif électronique 10 est une tablette électronique (de l'anglais pad). L'équipement cible 12 comprend un code unique 32, agencé sur une face extérieure 34 de l'équipement et propre à permettre l'identification de l'équipement 12 par le dispositif électronique 10, externe à l'équipement cible. L'équipement cible 12 est, par exemple, un équipement électrique. L'équipement électrique 12 comprend une armoire de protection 36 et une pluralité d'appareils électriques 38 disposés dans l'armoire 36. En complément, l'équipement électrique 12 comprend une première base de données 40 et des premiers moyens 42 de transmission de données à destination du dispositif électronique 10. L'équipement électrique 12 est, par exemple, un poste de transformation électrique, et comporte une pluralité de conducteurs électriques 44 correspondant aux arrivées ou aux départs.
La première liaison de données 14 est, par exemple, une liaison radioélectrique de données. La première liaison de données 14 est conforme au protocole de communication ZigBee basé sur la norme IEEE-802.15.4. En variante, la première liaison de données 14 est conforme à la norme IEEE-802.15.1 ou à la norme IEEE-802.15.2. En variante encore, la première liaison de données 14 est conforme à la norme IEEE-802.11.
Le serveur distant 16 comporte une deuxième base de données 46 et des deuxièmes moyens 48 de transmission de données à destination du dispositif électronique 10. La deuxième liaison de données 18 est, par exemple, une liaison radioélectrique de données. La deuxième liaison 18 est conforme au protocole de communication ZigBee basé sur la norme IEEE-802.15.4. En variante, la deuxième liaison de données 18 est conforme à la norme IEEE-802.15.1 ou à la norme IEEE-802.15.2. En variante encore, la deuxième liaison de données 18 est conforme à la norme IEEE-802.11. En complément, la deuxième liaison de données 18 est en partie formée par le réseau Internet, lorsque le serveur distant 16 est un serveur connecté à Internet. L'écran 20 est, par exemple, un écran tactile, tel qu'un écran tactile capacitif. L'écran 20 présente des dimensions permettant une visualisation aisée de l'équipement cible 12 et de l'information relative superposée en réalité augmentée, telle qu'une diagonale de longueur supérieure à 5 pouces, de préférence supérieure à 7 pouces, de préférence encore supérieure à 9 pouces. Les moyens d'affichage 22 sont propres à afficher tout type d'image à l'écran 20 du dispositif, notamment une image I, acquise par le capteur d'images 24 et directement affichée à l'écran, ou bien l'image enrichie le. Le capteur d'images 24 est propre à acquérir une ou plusieurs images successives de l'équipement cible 12. Le capteur d'images 24 est un capteur matriciel, tel qu'un capteur CCD (de l'anglais Charge-Coupled Device) ou un capteur CMOS (de l'anglais Complementary Metal Oxide Semi-conductor). Le capteur d'images 24 est propre à délivrer à l'unité de traitement d'informations 26 une image de l'équipement cible 12, ou bien une vidéo formée d'images successives dudit équipement cible 12. L'unité de traitement d'informations 26 comporte un processeur 50 et une mémoire 52 associée au processeur 50. L'émetteur-récepteur radioélectrique 28 est, de manière analogue aux première et deuxième liaisons de données 14, 18, conforme au protocole de communication ZigBee basé sur la norme IEEE-802.15.4. En variante, l'émetteur-récepteur radioélectrique 28 est conforme à la norme IEEE-802.15.1 ou à la norme IEEE-802.15.2. En variante encore, l'émetteur-récepteur radioélectrique 28 est conforme à la norme IEEE-802.11. Les moyens d'alimentation 30 comportent une batterie électrique, non représentée, afin d'alimenter de manière autonome les éléments constitutifs du dispositif électronique 10. La batterie électrique est de préférence rechargeable.
Le code unique 32 est, par exemple, un code OR (de l'anglais Quick Response), également appelé code matriciel. Le code OR est constitué de modules noirs disposés dans un carré à fond blanc. En variante, le code unique 32 est un code à barres. En variante encore, le code unique 32 est un code d'identification contenu dans une clé électronique d'identification agencée sur la face extérieure 34, la clé électronique d'identification étant propre à communiquer le code d'identification via une communication en champ proche, également appelée NFC (de l'anglais Near Field Communication). Le code unique 32 est, par exemple, collé à proximité du coin supérieur droit de la face extérieure 34. La face extérieure 34 de l'équipement cible sur laquelle est disposé le code unique 32 est une face visible et facilement accessible pour l'utilisateur. Les appareils électriques 38 sont connus en soi et sont des appareils tels que des disjoncteurs, des sectionneurs, des contacteurs, des relais ou des dispositifs de mesure de tension, de courant, de puissance ou d'énergie électrique couramment utilisés dans des équipements électriques. La première base de données 40 est apte à stocker des données relatives à l'équipement électrique 12, notamment des données relatives au fonctionnement de chaque appareil électrique 38. Les données relatives au fonctionnement sont régulièrement rafraîchies dans la première base de données 40 au cours du fonctionnement de l'équipement électrique 12. Les données relatives au fonctionnement de l'équipement 12 propres à être stockées dans la première base de données 40 sont des données telles que la puissance électrique consommée, la tension électrique et la température pour chacun des appareils électriques 38, ainsi que la présence ou non d'un défaut de fonctionnement pour chacun des appareils électriques 38. Les premiers moyens de transmission 42 sont propres à envoyer au dispositif électronique 10 les données relatives au fonctionnement de l'équipement 12, stockées dans la première base de données 40, lesdites données étant destinées à être superposées à l'image de l'équipement I, acquise par le capteur d'images 24 pour former l'image enrichie I, destinée à être affichée à l'écran 20 du dispositif électronique. La deuxième base de données 46 est également propre à stocker des données relatives à l'équipement cible 12, telles que le schéma de câblage de l'équipement électrique 12, les données constructeur et la référence de chacun des appareils électriques 38, la liste des actions correctives à réaliser pour corriger un éventuel défaut d'un appareil électrique 38.
En complément, la deuxième base de données 46 est propre à stocker des données telles que la date de mise en service de l'équipement 12, la date de dernière révision de l'équipement 12 et l'historique des révisions effectuées pour ledit équipement 12.
Les deuxièmes moyens de transmission 48 sont propres à envoyer au dispositif électronique 10 les données relatives à l'équipement cible 12, stockées dans la deuxième base de données 46, lesdites données étant destinées à être superposées à l'image de l'équipement I, acquise par le capteur d'images 24 pour former l'image enrichie le destinée à être affichée sur l'écran 20 du dispositif.
La mémoire 52 de l'unité de traitement d'informations du dispositif électronique est apte à stocker un logiciel 54 d'identification de l'équipement cible, un logiciel 56 de détermination dans l'image acquise I, de points caractéristiques de l'équipement cible, et un logiciel 58 de modification de l'image acquise I, en l'image enrichie le par superposition à l'image acquise I, de l'information relative à l'équipement cible 12 identifié.
Le logiciel d'identification 54, le logiciel de détermination 56 et le logiciel de modification 58 forment une application 59 d'affichage en réalité augmentée d'une information relative à l'équipement cible 12 En variante, les moyens d'identification 54, les moyens de détermination 56 et les moyens de modification 58 sont réalisés sous forme de circuits logiques programmables ou encore sous forme de circuits intégrés dédiés. En complément, la mémoire 52 est apte à stocker un premier logiciel 60 de communication avec l'équipement cible 12 via la première liaison de données 14 et un deuxième logiciel 62 de communication avec le serveur distant 16 via la deuxième liaison de données 18.
En complément, l'application d'affichage en réalité augmentée 59 comporte le premier logiciel de communication 60 et le deuxième logiciel de communication 62. En variante, les premiers moyens de communication 60 et les deuxièmes moyens de communication 62 sont réalisés sous forme de circuits logiques programmables ou encore sous forme de circuits intégrés dédiés.
Le logiciel d'identification 54 est propre à reconnaître l'équipement cible 12 à l'aide du code unique 32 associé à l'équipement. Le logiciel de détermination 56 est propre à déterminer les points caractéristiques de l'équipement cible 12 par reconnaissance du contour Ode l'équipement 12 et/ou de la position P des appareils électriques 38.
Le logiciel de modification 58 est propre à positionner, par rapport aux points caractéristiques déterminés par le logiciel de détermination 56, l'information superposée à l'image acquise la. Le fonctionnement du dispositif électronique 10, de l'équipement cible 12 et du serveur distant 16 pour l'affichage en réalité augmentée de l'information relative à l'équipement cible 12 va désormais être expliqué à l'aide de la figure 2 représentant l'organigramme du procédé d'affichage selon l'invention, de la figure 3 représentant différents repères de coordonnées utilisés pour le positionnement de l'information superposée, et des figures 4 à 12 illustrant différentes images affichées à l'écran 20 du dispositif lors de la mise en oeuvre du procédé d'affichage. Lors de l'étape initiale 100, l'application d'affichage en réalité augmentée 59 est lancée sur le dispositif électronique 10 par l'utilisateur. L'application d'affichage en réalité augmentée 59 commence alors par afficher un message d'accueil 102 à l'écran 20 à l'aide des moyens d'affichage 22, comme représenté sur la figure 4. Le message d'accueil 102 indique à l'utilisateur que la première étape consiste à identifier l'équipement cible 12, c'est-à-dire à reconnaître le tableau électrique, dans le mode de réalisation décrit. Le message d'accueil 102 invite aussi l'utilisateur à appuyer sur un premier bouton tactile 104 afin de lancer l'étape d'identification 110, puis à filmer le code unique 32, tel que le code OR, à l'aide du capteur d'images 24 au cours de l'étape d'identification 110. Lors de l'étape d'identification 110, une image du code unique 32 associé à l'équipement 12 est acquise par le capteur d'images 24, et le logiciel d'identification 54 identifie alors l'équipement 12 par reconnaissance du code unique 32 à l'aide de l'image du code acquise. L'image du code est, par exemple, acquise lorsque l'utilisateur filme le code OR 32. Lors de l'étape d'identification 110, l'équipement cible 12 est identifié, en l'absence de la localisation du dispositif électronique 10 à l'aide d'un capteur de positionnement contenu dans le dispositif électronique 10. L'homme du métier notera en effet que l'application d'affichage en réalité augmentée 59 ne nécessite aucune donnée de localisation du dispositif électronique 10 par rapport à l'équipement cible 12, contrairement au procédé d'affichage de l'état de la technique. L'application d'affichage en réalité augmentée 59 ne nécessite, par exemple, pas de données de positionnement issues d'un système GPS (de l'anglais Global Positioning System).
A l'issue de l'étape d'identification 110, le logiciel d'identification 54 affiche, à l'aide des moyens d'affichage 22, un premier message de confirmation 112, comme représenté sur la figure 5. Le premier message de confirmation 112 indique à l'utilisateur que le code unique 32 a été reconnu, et l'invite à appuyer dans la zone tactile correspondant au premier message de confirmation 112, afin d'activer l'affichage du menu principal de l'application d'affichage en réalité augmentée 59.
Lorsque l'utilisateur a appuyé sur la zone tactile correspondant au premier message de confirmation 112, visible sur la figure 5, l'application d'affichage en réalité augmentée 59 affiche, lors de l'étape 120, un menu principal permettant à l'utilisateur de sélectionner le type de données, c'est-à-dire le type d'information relative à l'équipement cible 12, auquel il souhaite accéder via l'affichage en réalité augmentée.
Le capteur d'images 24 effectue ensuite l'acquisition d'au moins une image I, de l'équipement cible 12 lors de l'étape 130. L'étape d'acquisition 130 consiste, par exemple, pour l'utilisateur, à filmer l'équipement cible 12 à l'aide du capteur d'images 24. Lors de l'étape 140, après l'acquisition de l'image I, par le capteur d'images 24, le logiciel de détermination 56 détermine des points caractéristiques de l'équipement cible 12 dans l'image acquise I,. La détermination des points caractéristiques de l'équipement cible 12 est, par exemple, effectuée par reconnaissance du contour C de l'équipement et/ou de la position P de chacun des appareils électriques 38 de l'équipement, comme représenté sur la figure 3. Les points caractéristiques de l'équipement cible 12 sont définis dans un premier repère de coordonnées R1 lié à l'équipement cible 12. Comme cela sera décrit plus en détail par la suite pour l'étape de modification 150, un deuxième repère de coordonnées R2 est lié à l'information superposée à l'image acquise et un troisième repère de coordonnées R3 est lié au dispositif électronique 10, tel que représenté sur la figure 3.
Les points caractéristiques de l'équipement cible 12, également appelés points d'accrochage de l'information superposée, sont, par exemple, des sommets du contour C, ou encore les positions P des barycentres des appareils électriques 38 dans le premier repère R1. Après avoir déterminé les points d'accrochage de l'information à superposer à l'image acquise la, l'application d'affichage en réalité augmentée 59 modifie, lors de l'étape 150, à l'aide de son logiciel de modification 58, l'image acquise I, en l'image enrichie I, par superposition à l'image acquise I, de l'information relative à l'équipement cible 12 identifié précédemment lors de l'étape 110, comme représenté sur les figures 6 à 12.
Pour ce faire, le logiciel de modification 58 positionne ladite information relative à l'équipement cible 12 par rapport aux points d'accrochage déterminés précédemment lors de l'étape 140, puis superpose cette information à l'image acquise 1, en la position calculée. Le positionnement de l'information superposée est effectué à l'aide des premier, deuxième et troisième repères R1, R2, R3, visibles sur la figure 3, afin de mettre à l'échelle et en perspective ladite information relative à l'équipement cible sur l'image acquise la. Le premier repère R1 est un repère fixe lié à l'équipement, le deuxième repère R2 est lié aux informations affichables en superposition sur l'image acquise 1,, et le troisième repère R3 est lié au dispositif électronique mobile 10. Le premier repère R1 est localisé sur l'équipement cible 12 par rapport aux points caractéristiques déterminés précédemment. La position des deuxième et troisième repères R2 et R3 est recalculée régulièrement sur les trois axes par rapport au premier repère fixe R1. Le dispositif électronique mobile 10 connait donc en permanence la position relative des trois repères R1, R2, R3, ce qui lui permet d'ajuster l'échelle et l'emplacement des informations affichées à l'écran 20 en superposition sur l'image acquise la. L'information relative à l'équipement cible 12 comporte des données stockées dans la mémoire 52 du dispositif électronique. En variante ou en complément, l'information relative à l'équipement cible 12 comporte des données stockées dans la première base de données 40 et reçues depuis l'équipement cible 12 via le premier logiciel de communication 60 et les premiers moyens de transmission 42. En variante ou en complément, l'information relative à l'équipement cible 12 comporte des données stockées dans la deuxième base de données 46 et reçues depuis le serveur distant 16 via le deuxième logiciel de communication 62 et les deuxièmes moyens de transmission 48. L'information relative à l'équipement cible 12 comporte, tel que cela sera décrit plus en détail par la suite en regard des figures 6 à 12, au moins un élément parmi le groupe constitué de : le schéma de câblage électrique de l'équipement cible 12 ; la date de mise en service de l'équipement cible 12 ; la date de dernière révision de l'équipement cible 12 ; l'historique des révisions effectuées pour l'équipement cible 12 ; la référence de chacun des appareils électriques 38 constituant l'équipement cible 12 ; la puissance électrique consommée, la tension électrique et la température pour chacun des appareils électriques 38 constituant l'équipement cible 12 ; la présence d'un défaut pour chacun des appareils électriques 38 constituant l'équipement cible 12 ; l'état de chacun des appareils électriques de protection appartenant à l'équipement cible 12, l'état étant par exemple égal à contact fermé ou ouvert, ou encore à appareil déclenché ou non ; et la liste des actions à réaliser pour corriger un défaut d'un appareil électrique 38 de l'équipement cible 12. L'application d'affichage en réalité augmentée 59 affiche enfin, lors de l'étape 160, l'image enrichie I, à l'écran 20 du dispositif électronique, comme représenté sur les figures 6 à 12. Dans l'exemple de réalisation de la figure 6, l'information relative à l'équipement 12 comporte le schéma de câblage électrique 170 de l'équipement électrique 12, ce qui permet à l'utilisateur de voir très rapidement comment les différents appareils électriques 38 sont connectés entre eux.
Lorsque l'application de l'affichage en réalité augmentée 59 affiche, à l'aide des moyens d'affichage 22, le schéma de câblage électrique 170, un deuxième 172 et un troisième 174 boutons tactiles sont également affichés à l'écran 20 afin de permettre à l'utilisateur, s'il le souhaite, de simuler un défaut, et respectivement d'afficher des informations plus détaillées relatives à chacun des appareils électriques 38.
Dans l'exemple de réalisation de la figure 7, l'information relative à l'équipement électrique 12 comporte des données relatives à chacun des appareils électriques 38, notamment la référence de chacun des appareils 38. Cette image I, enrichie avec les données relatives aux appareils 38 est affichée lorsque l'utilisateur a, par exemple, précédemment appuyé sur le troisième bouton tactile 174.
Les données associées à chacun des appareils 38 sont affichées dans des premières bulles 176, chaque première bulle 176 étant positionnée, dans l'image enrichie le, à proximité de l'appareil électrique 38 auquel les données qu'elle contient sont associées. Ceci est également très utile pour l'utilisateur qui dispose ainsi d'une vue globale des données associées à chacun des appareils électriques 38, sans avoir besoin de s'approcher de chacun des appareils 38 afin de déterminer plus précisément de quel appareil il s'agit. Dans l'exemple de réalisation de la figure 8, l'information relative à l'équipement cible 12 comporte une première courbe 178 représentant la puissance électrique consommée par l'appareil électrique 38 associé à cette information superposée, une deuxième courbe 180 représentant la température dudit appareil électrique 38 et une troisième courbe 182 représentant la tension électrique aux bornes dudit appareil électrique 38. Dans l'exemple de réalisation de la figure 9, l'application d'affichage en réalité augmentée 59 affiche l'image enrichie I, avec le contour d'un appareil électrique 38 en surbrillance, et affiche également un quatrième bouton tactile 184, afin de proposer à l'utilisateur de reconnaître cet appareil électrique 38, c'est-à-dire d'afficher en réalité augmentée la référence de cet appareil 38, voire en complément des données additionnelles relatives à cet appareil 38. Dans l'exemple de réalisation de la figure 10, l'information relative à l'équipement cible 12 comporte la date de mise en service, la date de dernière révision et l'historique des révisions effectuées pour l'équipement cible 12, ces informations étant affichées dans l'image enrichie I, à l'intérieure d'une deuxième bulle 186 superposée à l'équipement 12. L'application d'affichage en réalité augmentée 59 affiche en outre un cinquième bouton tactile 188 permettant à l'utilisateur d'aller dans un mode, dit mode appareils, visible sur la figure 7, pour lequel les données associées à chacun des appareils 38 sont affichées en superposition dans l'image enrichie le. Dans l'exemple de réalisation de la figure 11, l'application d'affichage en réalité augmentée 59 affiche dans l'image enrichie le l'information relative à la présence ou non d'un défaut pour chacun des appareils électriques 38 constituant l'équipement 12. Une signalétique 190, représentée en traits pointillés sur la figure 11, est superposée en surbrillance à l'image acquise, par exemple afin de signaler un défaut d'un générateur. Ce défaut est en outre signalé par l'affichage d'un deuxième message de confirmation 192 indiquant à l'utilisateur qu'un défaut du générateur a été diagnostiqué et l'invitant à appuyer dans la zone tactile correspondant à ce deuxième message de confirmation 192, afin que lui soient précisées les actions correctives à effectuer pour résoudre ce défaut. Dans l'exemple de réalisation de la figure 12, lorsque l'utilisateur a précédemment appuyé dans la zone tactile correspondant au deuxième message de confirmation 192, visible sur la figure 11, les actions correctives à effectuer pour résoudre le défaut sont affichées en réalité augmentée dans un tableau 194. Le tableau 194 comporte les actions correctives à effectuer et le statut de chacune des actions, réactualisé au fur et à mesure que les actions sont effectuées, le statut étant renseigné à l'aide des données relatives au fonctionnement de l'appareil 38 concerné, ou plus généralement de l'équipement cible 12, reçues via le premier logiciel de communication 60 et les premiers moyens de transmission 42. La résolution d'un défaut est ainsi particulièrement simple à mettre en oeuvre pour l'utilisateur, puisque celui-ci est informé de chacune des actions successives à effectuer, ainsi que du résultat positif ou non des actions effectuées. L'application d'affichage en réalité augmentée 59 affiche en outre un troisième message de confirmation 196 lorsque le défaut a été résolu, afin d'en informer l'utilisateur.
Le procédé d'affichage en réalité augmentée selon l'invention est donc particulièrement utile et efficace pour l'utilisateur, qui est susceptible consulter ainsi très rapidement différentes données relatives à l'équipement cible 12, comme décrit précédemment en regard des figures 6 à 12.
Le procédé d'affichage est en outre particulièrement réactif, puisqu'après avoir identifié l'équipement cible 12, l'information relative à l'équipement 12 est superposée et positionnée par rapport à l'image acquise à l'aide de points caractéristiques de l'équipement cible 12, déterminés de manière régulière par le logiciel de détermination 56. Les traitements mis en oeuvre par l'unité de traitement d'informations 26 sont relativement courts, car ils ne nécessitent pas de recevoir des signaux, tels que des signaux de positionnement, d'un système externe au dispositif électronique 10 et à l'équipement cible 12, contrairement au procédé d'affichage de l'état de la technique qui nécessite d'acquérir de manière régulière la position du dispositif électronique par rapport à l'équipement cible, par l'intermédiaire d'un système de positionnement par satellite, ce qui implique des traitements relativement longs. On conçoit ainsi que le procédé d'affichage selon l'invention permet d'améliorer le temps de réponse pour l'affichage de l'image enrichie le par rapport à l'acquisition initiale de l'image la de l'équipement 12 via le capteur d'images 24.20
Claims (1)
- REVENDICATIONS1.- Procédé d'affichage, sur un écran (20) d'un dispositif électronique (10), d'une information relative à un équipement cible (12), le dispositif électronique (10) comportant un capteur d'images (24), l'écran (20), des moyens (22) d'affichage de données à l'écran (20), et une unité de traitement d'informations (26), le procédé comprenant les étapes suivantes : - l'acquisition (130), par le capteur d'images (24), d'au moins une image (la) de l'équipement cible (12), - l'identification (110) de l'équipement cible (12) par l'unité de traitement (26, 54), - la modification (150), par l'unité de traitement (26, 58), de l'image acquise (la) en une image enrichie (le), par superposition à l'image acquise (la) de l'information relative à l'équipement cible (12) identifié, et - l'affichage (160), par les moyens d'affichage (22), de l'image enrichie (le) à l'écran (20), le procédé étant caractérisé en ce qu'il comprend en outre l'étape suivante : - la détermination (140), par l'unité de traitement (26, 56), de points caractéristiques de l'équipement cible (12) dans l'image acquise (la), et en ce que lors de l'étape d'identification (110), l'équipement cible (12) est reconnu via un code unique (32) associé à l'équipement (12), et lors de l'étape de modification (150), l'information superposée à l'image acquise (la) est en outre positionnée par rapport aux points caractéristiques déterminés.2.- Procédé selon la revendication 1, dans lequel, lors de l'étape d'identification (110), une image du code unique (32) associé à l'équipement (12), tel qu'un code OR ou un code à barres, est acquise par le capteur d'images (24), et l'unité de traitement (26, 54) identifie l'équipement (12) par reconnaissance du code (32) à l'aide de l'image du code acquise.3.- Procédé selon la revendication 1 ou 2, dans lequel, lors de l'étape d'identification (110), l'équipement cible (12) est identifié en l'absence de la localisation du dispositif électronique (10) à l'aide d'un capteur de positionnement contenu dans le dispositif électronique (10).4.- Procédé selon l'une quelconque des revendications précédentes, dans lequel, lors de l'étape de détermination (140), les points caractéristiques de l'équipement cible(12) sont déterminés par reconnaissance du contour (C) de l'équipement et/ou de la position (P) d'élément(s) (38) de l'équipement (12).5.- Procédé selon l'une quelconque des revendications précédentes, dans lequel, lors de l'étape de modification (150), le positionnement de l'information superposée est effectué à l'aide d'un premier repère de coordonnées (R1) lié à l'équipement cible (12), d'un deuxième repère de coordonnées (R2) lié à l'information superposée et d'un troisième repère de coordonnées (R3) lié au dispositif électronique (10).6.- Procédé selon l'une quelconque des revendications précédentes, dans lequel le dispositif électronique (10) comporte en outre des premiers moyens (60) de communication avec l'équipement cible (12) via une première liaison de données (14), et dans lequel l'information relative à l'équipement cible (12) comporte des données, notamment des données relatives au fonctionnement de l'équipement cible (12), reçues depuis l'équipement cible (12) via les premiers moyens de communication (60).7.- Procédé selon l'une quelconque des revendications précédentes, dans lequel le dispositif électronique (10) comporte en outre des deuxièmes moyens (62) de communication avec un serveur distant (16) via une deuxième liaison de données (18), et dans lequel l'information relative à l'équipement cible (12) comporte des données reçues depuis le serveur distant (16) via les deuxièmes moyens de communication (62).8.- Procédé selon l'une quelconque des revendications précédentes, dans lequel l'équipement cible (12) est un équipement électrique, et l'information relative à l'équipement électrique (12) comporte au moins un élément parmi le groupe constitué de : le schéma de câblage électrique ; la date de mise en service ; la date de dernière révision ; l'historique des révisions effectuées ; la référence de chacun des appareils électriques (38) constituant l'équipement ; la puissance électrique consommée, la tension électrique et la température pour chacun des appareils électriques (38) constituant l'équipement (12); la présence d'un défaut pour chacun des appareils électriques (38) constituant l'équipement (12) ; l'état de chacun des appareils électriques (38) de protection appartenant à l'équipement (12), tel que contact fermé ou ouvert et appareil déclenché ou non ; et la liste des actions à réaliser pour corriger un défaut d'un appareil électrique (38) de l'équipement (12).359.- Produit programme d'ordinateur comportant des instructions logicielles qui, lorsque mises en oeuvre par une unité de traitement d'informations (26) intégrée à un dispositif électronique (10), met en oeuvre le procédé selon l'une quelconque des revendications précédentes.10.- Dispositif électronique (10) comprenant : - un capteur d'images (24), - un écran (20), - des moyens (22) d'affichage de données à l'écran (20), et - une unité de traitement d'informations (26) comportant des moyens (54) d'identification d'un équipement cible (12), des moyens (58) de modification d'une image acquise (la) par le capteur d'images (24) en une image enrichie (le), les moyens de modification (58) étant propres à superposer, à l'image acquise (la), une information relative à l'équipement cible (12) identifié, les moyens d'affichage (22) étant propres à afficher l'image enrichie (le) à l'écran (20), caractérisé en ce que l'unité de traitement d'informations (26) comporte en outre des moyens (56) de détermination de points caractéristiques de l'équipement cible (12) dans l'image acquise (la), en ce que les moyens d'identification (54) sont propres à reconnaitre l'équipement cible (12) via un code unique (32) associé à l'équipement (12), et en ce que les moyens de modification (58) sont propres à positionner, par rapport aux points caractéristiques déterminés, l'information superposée à l'image acquise (la).11.- Dispositif électronique (10) selon la revendication 10, dans lequel le dispositif électronique (12) est un téléphone portable ou une tablette électronique.12.- Equipement électrique (12) comprenant : - une armoire de protection (36), - au moins un appareil électrique (38) disposé dans l'armoire (36), - une base de données (40) apte à stocker des données relatives au fonctionnement du ou de chaque appareil électrique (38), et - des moyens (42) de transmission de données à destination d'un dispositif électronique (10) externe,caractérisé en ce qu'il comprend en outre un code unique (32) agencé sur une face extérieure (34) de l'armoire (36) et propre à permettre l'identification de l'équipement (12) par le dispositif électronique (10) externe, et en ce que les moyens de transmission (42) sont propres à envoyer, audit dispositif externe (10), les données relatives au fonctionnement stockées dans la base de données (40), lesdites données étant destinées à être superposées à une image de l'équipement (12) acquise par le dispositif externe (10) pour former une image enrichie (le) affichée sur un écran (20) dudit dispositif externe (10).13.- Equipement électrique (12) selon la revendication 12, dans lequel le code unique (32) est un élément parmi le groupe constitué des éléments suivants : un code OR, un code à barres et un code d'identification contenu dans une clé électronique d'identification agencée sur la face extérieure (34), la clé électronique d'identification étant propre à communiquer le code d'identification via une communication en champ proche.15
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1254179A FR2990286B1 (fr) | 2012-05-07 | 2012-05-07 | Procede d'affichage en realite augmentee d'une information relative a un equipement cible sur un ecran d'un dispositif electronique, produit programme d'ordinateur, dispositif electronique et equipement electrique associes |
| PCT/EP2013/059366 WO2013167523A1 (fr) | 2012-05-07 | 2013-05-06 | Procede d'affichage en realite augmentee d'une information relative à un equipement cible sur un ecran d'un dispositif electronique, produit programme d'ordinateur, dispositif electronique et equipement electrique associes |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1254179A FR2990286B1 (fr) | 2012-05-07 | 2012-05-07 | Procede d'affichage en realite augmentee d'une information relative a un equipement cible sur un ecran d'un dispositif electronique, produit programme d'ordinateur, dispositif electronique et equipement electrique associes |
| FR1254179 | 2012-05-07 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| FR2990286A1 true FR2990286A1 (fr) | 2013-11-08 |
| FR2990286B1 FR2990286B1 (fr) | 2019-09-06 |
Family
ID=48407509
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| FR1254179A Active FR2990286B1 (fr) | 2012-05-07 | 2012-05-07 | Procede d'affichage en realite augmentee d'une information relative a un equipement cible sur un ecran d'un dispositif electronique, produit programme d'ordinateur, dispositif electronique et equipement electrique associes |
Country Status (2)
| Country | Link |
|---|---|
| FR (1) | FR2990286B1 (fr) |
| WO (1) | WO2013167523A1 (fr) |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150109332A1 (en) * | 2013-10-17 | 2015-04-23 | Fmr Llc | Real-time visualizations of components in a modular instrumentation center |
| WO2016026601A1 (fr) * | 2014-08-20 | 2016-02-25 | Sig Technology Ag | Terminal de commande pour installations de traitement |
| EP3054426A1 (fr) | 2015-02-05 | 2016-08-10 | Schneider Electric Industries SAS | Procédé de gestion de l'affichage, produit programme d'ordinateur et dispositif électronique associés |
| DE102015209899A1 (de) * | 2015-05-29 | 2016-12-01 | Kuka Roboter Gmbh | Auswahl eines Gerätes oder eines Objektes mit Hilfe einer Kamera |
| FR3044123A1 (fr) * | 2015-11-24 | 2017-05-26 | Electricite De France | Dispositif pour le pilotage a distance d'au moins un equipement electrique |
| FR3065561A1 (fr) * | 2017-04-24 | 2018-10-26 | Safran Aircraft Engines | Systeme et procede d'inspection d'un systeme mecanique base sur la realite augmentee |
| EP3647911A1 (fr) * | 2018-11-05 | 2020-05-06 | Primetals Technologies Germany GmbH | Surveillance d'un produit supportée par la réalité augmentée |
| US10674077B2 (en) * | 2017-09-19 | 2020-06-02 | Electronics And Telecommunications Research Institute | Apparatus and method for providing mixed reality content |
| CN111766409A (zh) * | 2019-04-02 | 2020-10-13 | 精英电脑股份有限公司 | 板件构件的即时定位装置与方法 |
| EP3678048A4 (fr) * | 2017-09-30 | 2021-05-05 | Schneider Electric Industries SAS | Procédé et dispositif d'identification d'état d'appareil électrique |
| FR3117642A1 (fr) * | 2020-12-16 | 2022-06-17 | Schneider Electric Industries Sas | Procédé pour la configuration et l’affichage en réalité augmentée ou mixte ou étendue des informations relatives à un équipement installé dans un site réel, produit programme d’ordinateur et dispositif électronique associés |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104200459A (zh) * | 2014-08-04 | 2014-12-10 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
| CN104898996B (zh) * | 2015-05-04 | 2022-04-22 | 联想(北京)有限公司 | 信息处理方法及电子设备 |
| JP6384443B2 (ja) * | 2015-09-25 | 2018-09-05 | 横河電機株式会社 | 点検作業支援装置、システム、及び方法 |
| CN106920071B (zh) * | 2017-02-23 | 2018-03-27 | 广东电网有限责任公司教育培训评价中心 | 变电站现场作业辅助方法和系统 |
| CN114554152A (zh) * | 2022-02-22 | 2022-05-27 | 正泰电气股份有限公司 | 变电站的智能监控方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6167464A (en) * | 1998-09-23 | 2000-12-26 | Rockwell Technologies, Llc | Mobile human/machine interface for use with industrial control systems for controlling the operation of process executed on spatially separate machines |
| US20060241792A1 (en) * | 2004-12-22 | 2006-10-26 | Abb Research Ltd. | Method to generate a human machine interface |
| US20080218331A1 (en) * | 2007-03-08 | 2008-09-11 | Itt Manufacturing Enterprises, Inc. | Augmented reality-based system and method to show the location of personnel and sensors inside occluded structures and provide increased situation awareness |
| US20110115816A1 (en) * | 2009-11-16 | 2011-05-19 | Alliance For Sustainable Energy, Llc. | Augmented reality building operations tool |
| US20120038458A1 (en) * | 2010-07-28 | 2012-02-16 | Toepke Todd M | Handheld field maintenance tool with improved diagnostics |
| US20120105447A1 (en) * | 2010-11-02 | 2012-05-03 | Electronics And Telecommunications Research Institute | Augmented reality-based device control apparatus and method using local wireless communication |
-
2012
- 2012-05-07 FR FR1254179A patent/FR2990286B1/fr active Active
-
2013
- 2013-05-06 WO PCT/EP2013/059366 patent/WO2013167523A1/fr active Application Filing
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6167464A (en) * | 1998-09-23 | 2000-12-26 | Rockwell Technologies, Llc | Mobile human/machine interface for use with industrial control systems for controlling the operation of process executed on spatially separate machines |
| US20060241792A1 (en) * | 2004-12-22 | 2006-10-26 | Abb Research Ltd. | Method to generate a human machine interface |
| US20080218331A1 (en) * | 2007-03-08 | 2008-09-11 | Itt Manufacturing Enterprises, Inc. | Augmented reality-based system and method to show the location of personnel and sensors inside occluded structures and provide increased situation awareness |
| US20110115816A1 (en) * | 2009-11-16 | 2011-05-19 | Alliance For Sustainable Energy, Llc. | Augmented reality building operations tool |
| US20120038458A1 (en) * | 2010-07-28 | 2012-02-16 | Toepke Todd M | Handheld field maintenance tool with improved diagnostics |
| US20120105447A1 (en) * | 2010-11-02 | 2012-05-03 | Electronics And Telecommunications Research Institute | Augmented reality-based device control apparatus and method using local wireless communication |
Non-Patent Citations (3)
| Title |
|---|
| HUGO ALVAREZ ET AL: "Providing guidance for maintenance operations using automatic markerless Augmented Reality system", MIXED AND AUGMENTED REALITY (ISMAR), 2011 10TH IEEE INTERNATIONAL SYMPOSIUM ON, IEEE, 26 October 2011 (2011-10-26), pages 181 - 190, XP032201450, ISBN: 978-1-4577-2183-0, DOI: 10.1109/ISMAR.2011.6092385 * |
| REITMAYR G ET AL: "Semi-automatic Annotations in Unknown Environments", MIXED AND AUGMENTED REALITY, 2007. ISMAR 2007. 6TH IEEE AND ACM INTERNATIONAL SYMPOSIUM ON, IEEE, PISCATAWAY, NJ, USA, 13 November 2007 (2007-11-13), pages 67 - 70, XP031269876, ISBN: 978-1-4244-1749-0 * |
| SANGHOON LEE ET AL: "Augmented reality-based computational fieldwork support for equipment operations and maintenance", AUTOMATION IN CONSTRUCTION, ELSEVIER SCIENCE PUBLISHERS, AMSTERDAM, NL, vol. 20, no. 4, 4 November 2010 (2010-11-04), pages 338 - 352, XP028194601, ISSN: 0926-5805, [retrieved on 20101111], DOI: 10.1016/J.AUTCON.2010.11.004 * |
Cited By (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150109332A1 (en) * | 2013-10-17 | 2015-04-23 | Fmr Llc | Real-time visualizations of components in a modular instrumentation center |
| WO2016026601A1 (fr) * | 2014-08-20 | 2016-02-25 | Sig Technology Ag | Terminal de commande pour installations de traitement |
| US10534346B2 (en) | 2014-08-20 | 2020-01-14 | Sig Technology Ag | Terminal for processing facilities |
| CN106575113A (zh) * | 2014-08-20 | 2017-04-19 | Sig技术股份公司 | 用于处理设施的终端 |
| US9805477B2 (en) | 2015-02-05 | 2017-10-31 | Schneider Electric Industries Sas | Display management method and associated computer program product and electronic device |
| EP3054426A1 (fr) | 2015-02-05 | 2016-08-10 | Schneider Electric Industries SAS | Procédé de gestion de l'affichage, produit programme d'ordinateur et dispositif électronique associés |
| FR3032544A1 (fr) * | 2015-02-05 | 2016-08-12 | Schneider Electric Ind Sas | Procede de gestion de l'affichage, produit programme d'ordinateur et dispositif electronique associes |
| DE102015209899B4 (de) * | 2015-05-29 | 2019-06-19 | Kuka Roboter Gmbh | Auswahl eines Gerätes oder eines Objektes mit Hilfe einer Kamera |
| US10095216B2 (en) | 2015-05-29 | 2018-10-09 | Kuka Roboter Gmbh | Selection of a device or object using a camera |
| DE102015209899A1 (de) * | 2015-05-29 | 2016-12-01 | Kuka Roboter Gmbh | Auswahl eines Gerätes oder eines Objektes mit Hilfe einer Kamera |
| FR3044123A1 (fr) * | 2015-11-24 | 2017-05-26 | Electricite De France | Dispositif pour le pilotage a distance d'au moins un equipement electrique |
| FR3065561A1 (fr) * | 2017-04-24 | 2018-10-26 | Safran Aircraft Engines | Systeme et procede d'inspection d'un systeme mecanique base sur la realite augmentee |
| US10674077B2 (en) * | 2017-09-19 | 2020-06-02 | Electronics And Telecommunications Research Institute | Apparatus and method for providing mixed reality content |
| EP3678048A4 (fr) * | 2017-09-30 | 2021-05-05 | Schneider Electric Industries SAS | Procédé et dispositif d'identification d'état d'appareil électrique |
| US11302099B2 (en) | 2017-09-30 | 2022-04-12 | Schneider Electric Industries Sas | Method and device for recognizing states of electrical devices |
| EP3647911A1 (fr) * | 2018-11-05 | 2020-05-06 | Primetals Technologies Germany GmbH | Surveillance d'un produit supportée par la réalité augmentée |
| CN111766409A (zh) * | 2019-04-02 | 2020-10-13 | 精英电脑股份有限公司 | 板件构件的即时定位装置与方法 |
| FR3117642A1 (fr) * | 2020-12-16 | 2022-06-17 | Schneider Electric Industries Sas | Procédé pour la configuration et l’affichage en réalité augmentée ou mixte ou étendue des informations relatives à un équipement installé dans un site réel, produit programme d’ordinateur et dispositif électronique associés |
| EP4016382A1 (fr) * | 2020-12-16 | 2022-06-22 | Schneider Electric Industries SAS | Procédé pour la configuration et l' affichage en réalité augmentée ou mixte ou étendue des informations relatives à un équipement installé dans un site réel, produit programme d ordinateur et dispositif électronique associés |
| US11816802B2 (en) | 2020-12-16 | 2023-11-14 | Schneider Electric Industries Sas | Method for configuring and displaying, in augmented or mixed or extended reality, the information relating to equipment installed in a real site, and associated computer program product and electronic device |
Also Published As
| Publication number | Publication date |
|---|---|
| FR2990286B1 (fr) | 2019-09-06 |
| WO2013167523A1 (fr) | 2013-11-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| FR2990286B1 (fr) | Procede d'affichage en realite augmentee d'une information relative a un equipement cible sur un ecran d'un dispositif electronique, produit programme d'ordinateur, dispositif electronique et equipement electrique associes | |
| US8542906B1 (en) | Augmented reality image offset and overlay | |
| FR2806511A1 (fr) | Procede d'attribution d'une installation de commande et/ou d'observation mobile a une machine et installation de commande et/ou d'observation a cette fin | |
| CN104048687A (zh) | 具有图像捕获能力的测量系统 | |
| JP2009020098A (ja) | 遠隔入力ナビゲーションシステム | |
| WO2013099075A1 (fr) | Appareil de traitement d'images, procédé d'ajout d'informations d'emplacement, et programme | |
| EP2685267B1 (fr) | Procéde et système de mesure à l'identification des phases | |
| JP2008228162A (ja) | エリア地図管理システムおよびエリア地図管理方法 | |
| JP2020013592A (ja) | プログラム、点検支援端末及び点検支援方法 | |
| CN113467663A (zh) | 界面配置方法、装置、计算机设备及介质 | |
| JP5273778B2 (ja) | 自動販売機と携帯端末との通信システム | |
| US10705614B2 (en) | Method and apparatus for generating vibration patterns | |
| JP2008045888A (ja) | 過熱診断装置 | |
| CN106133718B (zh) | 包括音频设备和用于显示关于音频设备的信息的移动设备的系统 | |
| CN104067544B (zh) | 更新变电站的一次装置的控制器的数据 | |
| JP5266416B1 (ja) | テストシステム及びテストプログラム | |
| JP5405412B2 (ja) | オブジェクト表示装置及びオブジェクト表示方法 | |
| WO2020003644A1 (fr) | Dispositif de détection de fuite de gaz et procédé de détection de fuite de gaz | |
| JP5897407B2 (ja) | 電子機器、撮像処理方法、およびプログラム | |
| US20180053020A1 (en) | Information code image display system, information code image display terminal, information code image display program, server, and information code image generating program | |
| CN104798365A (zh) | 摄像装置、摄像系统、摄像方法和摄像程序 | |
| US20220201198A1 (en) | Information processing apparatus, information processing method, and program | |
| CN104580299A (zh) | 信息产生与分享方法及其相关装置 | |
| CN112529560A (zh) | 离线收银系统、方法、装置及电子设备 | |
| US20170371312A1 (en) | Method of obtaining at least one operating parameter of an electrical substation component |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PLFP | Fee payment |
Year of fee payment: 5 |
|
| PLFP | Fee payment |
Year of fee payment: 6 |
|
| PLFP | Fee payment |
Year of fee payment: 7 |
|
| PLFP | Fee payment |
Year of fee payment: 8 |
|
| PLFP | Fee payment |
Year of fee payment: 9 |
|
| PLFP | Fee payment |
Year of fee payment: 10 |
|
| PLFP | Fee payment |
Year of fee payment: 11 |
|
| PLFP | Fee payment |
Year of fee payment: 12 |
|
| PLFP | Fee payment |
Year of fee payment: 13 |