FR2996912A1 - Dispositif et procede d'interaction a distance avec un systeme d'affichage - Google Patents

Dispositif et procede d'interaction a distance avec un systeme d'affichage Download PDF

Info

Publication number
FR2996912A1
FR2996912A1 FR1259898A FR1259898A FR2996912A1 FR 2996912 A1 FR2996912 A1 FR 2996912A1 FR 1259898 A FR1259898 A FR 1259898A FR 1259898 A FR1259898 A FR 1259898A FR 2996912 A1 FR2996912 A1 FR 2996912A1
Authority
FR
France
Prior art keywords
window
interaction
control
display
mobile
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
FR1259898A
Other languages
English (en)
Other versions
FR2996912B1 (fr
Inventor
Nicolas Chatrenet
Eric Petit
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Airbus Operations SAS
Original Assignee
Airbus Operations SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Airbus Operations SAS filed Critical Airbus Operations SAS
Priority to FR1259898A priority Critical patent/FR2996912B1/fr
Priority to US14/054,338 priority patent/US9652127B2/en
Publication of FR2996912A1 publication Critical patent/FR2996912A1/fr
Application granted granted Critical
Publication of FR2996912B1 publication Critical patent/FR2996912B1/fr
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00Specific applications
    • G09G2380/12Avionics applications

Abstract

L'invention concerne un dispositif mobile de commande et d'interaction à distance (4) avec un écran (2) d'un système de visualisation d'un cockpit d'aéronef adapté pour afficher au moins une fenêtre comportant au moins un élément virtuel de commande et/ou au moins une information d'état d'un système embarqué de l'aéronef. Ce dispositif comporte des moyens pour télécharger au moins une fenêtre affichée sur l'écran (2) de manière à interagir à distance avec l'élément interactif virtuel contenu dans la fenêtre téléchargée au moyen dudit dispositif mobile de commande et d'interaction (4) et/ou à afficher l'information d'état du système embarqué de l'aéronef sur ledit dispositif mobile de commande et d'interaction (4).

Description

DISPOSITIF ET PROCEDE D'INTERACTION A DISTANCE AVEC UN SYSTEME D'AFFICHAGE DESCRIPTION DOMAINE TECHNIQUE La présente invention concerne un dispositif mobile de commande et d'interaction à distance avec un système de visualisation d'un cockpit d'aéronef comportant une pluralité d'écrans adaptés pour afficher au moins une fenêtre, appelée également format, comportant au moins un élément virtuel (Widget, en anglais) de commande et/ou au moins une information d'état d'un système embarqué de l'aéronef. L'invention concerne également un procédé d'interaction à distance avec un système de visualisation d'un cockpit d'aéronef comportant une pluralité d'écrans adaptés pour afficher au moins une fenêtre d'interaction comportant au moins un élément virtuel de commande et/ou une information d'état du système embarqué de l'aéronef. L'invention concerne également un aeronef comportant un tel dispositif. L'invention s'applique particulièrement mais non exclusivement dans un système d'affichage avionique d'un poste de pilotage dans un cockpit d'un aéronef. L'invention concerne également un programme d'ordinateur comportant des instructions pour mettre en oeuvre le procédé selon l'invention. ÉTAT DE LA TECHNIQUE ANTÉRIEURE Dans les systèmes avioniques actuels (navigation, pilotage, gestion de mission, gestion des communications...), l'affichage d'informations s'effectue sur plusieurs écrans physiques distincts disposés devant les postes de pilotage sur une surface étendue du cockpit. Ces écrans sont reliés à des ordinateurs de bord qui analysent en permanence des données provenant de divers capteurs répartis dans l'avion et des données de commande fournies par les membres de l'équipage et élaborent des informations complexes à l'attention des membres de l'équipage. Chaque écran du cockpit peut comporter plusieurs fenêtres, appelées également formats, pouvant présenter des éléments interactifs (Widgets en anglais) adressant des applications distinctes. Les pilotes sont amenés à manipuler un ou plusieurs curseurs sur les différents écrans, afin de sélectionner un élément interactif ou de désigner un ou plusieurs objets virtuels. A cet effet, les membres de l'équipage utilisent un ou plusieurs dispositifs d'interaction indirecte avec les différents écrans, tels que par exemple un clavier, une boule de commande (track ball en anglais) ou un pavé tactile (touchpad en anglais).
En plus de la multiplicité des dispositifs d'interaction indirecte, les pilotes peuvent être amenés à adapter des dispositifs d'un même type, qui peut se présenter sous différentes formes, (un clavier par exemple) de manière à interagir avec des fenêtres différentes s'affichant sur les écrans nécessitant des formes de commande différentes. La multiplicité des types des dispositifs d'interaction induit une charge de travail supplémentaire pour identifier le dispositif d'interaction adapté à une fenêtre donnée. En outre, selon le contexte opérationnel (phase de vol) il peut arriver que certains dispositifs d'interaction indirecte ne soient pas conservés dans la zone privilégiée d'interaction face au pilote assurant au pilote un contrôle optimal et des conditions confortables d'interaction afin de garder cette zone libre de tout obstacle. Aussi, certains dispositifs d'interaction sont-ils situés sur des tablettes rétractables qui se glissent sous la planche de bord. Il en résulte une réduction de l'efficacité de l'interaction sur des formats d'affichage exploitant ces dispositifs d'interaction spécifiques qui doivent être manipulé au moyen des dispositifs génériques. Par ailleurs, Ces dispositifs ne sont pas adaptés à des interfaces graphiques naturelles (NUI, pour Natural User interface, en anglais) mais plutôt 20 principalement à des interfaces utilisateur graphiques (GUI, pour Graphical user interface). Ceci empêche ces interfaces d'évoluer vers des interfaces graphiques naturelles permettant d'améliorer la simplicité, l'efficacité d'utilisation et l'apprentissage. Une 25 solution connue pour assurer une interaction directe et naturelle avec les informations affichées, consiste à utiliser des écrans tactiles. Cependant, les fenêtres d'affichage sont étendues sur la surface du tableau de bord principal du cockpit et peuvent être trop 30 éloignées de la position du pilote l'obligeant à modifier souvent sa posture pour atteindre les différentes fenêtres affichées. Ceci nuit à l'ergonomie et à l'efficacité de l'action des pilotes. Le but de l'invention est de pallier les inconvénients de l'art antérieur décrit ci-dessus par 5 un nouveau dispositif d'interaction communalisé avec un système d'affichage adaptable facilement à la multiplicité des fenêtres d'affichage, de manière à remplacer les multiples dispositifs d'interaction utilisés dans l'art antérieur et d'améliorer 10 l'ergonomie et l'efficacité des interactions avec le système d'affichage. EXPOSÉ DE L'INVENTION L'invention préconise un dispositif mobile 15 de commande et d'interaction à distance avec un système de visualisation d'un cockpit d'aéronef comportant une pluralité d'écrans adaptés pour afficher au moins une fenêtre comportant au moins un élément virtuel de commande et/ou au moins une information d'état d'un 20 système embarqué de l'aéronef. Le dispositif selon l'invention comporte des moyens pour télécharger au moins une fenêtre affichée sur l'un au moins des écrans dudit système de visualisation de manière à interagir à distance avec 25 l'élément interactif virtuel contenu dans la fenêtre téléchargée au commande et l'information moyen dudit dispositif mobile de d'interaction et/ou à afficher embarqué de l'aéronef d'état du système sur ledit dispositif mobile de commande et 30 d'interaction.
Le dispositif selon l'invention comporte en outre un écran tactile et des moyens pour transférer la fenêtre téléchargée vers au moins un deuxième dispositif mobile de commande et d'interaction de manière à interagir à distance avec l'élément interactif virtuel contenu dans ladite fenêtre à partir dudit deuxième dispositif mobile de commande et d'interaction et/ou à afficher l'information d'état du système embarqué de l'aéronef sur ledit deuxième dispositif mobile de commande et d'interaction Le téléchargement de ladite fenêtre est préférentiellement commandé à partir du dispositif mobile de commande et d'interaction. Cette opération peut être réalisée par exemple par un premier mouvement de translation des doigts de l'utilisateur sur l'écran tactile du dispositif mobile; ledit premier mouvement de translation étant défini par la position initiale et la position finale de la fenêtre considérée.
Selon une autre caractéristique de l'invention, ladite fenêtre peut être échangée indistinctement entre le dispositif mobile de commande et d'interaction, l'écran du cockpit et le deuxième dispositif mobile de commande et d'interaction. Cet échange est commandé par un deuxième mouvement spécifique de translation prenant en compte les positions relatives initiales et finales des surfaces d'affichage de la fenêtre considérée. Le téléchargement de ladite fenêtre est 30 effectué via une interface homme machine de configuration permettant l'accès à toutes les actions de configurations pour télécharger une fenêtre affichable sur l'écran du système de visualisation d'un cockpit d'aéronef ou sur un deuxième dispositif mobile de commande et d'interaction.
Grâce à au dispositif selon l'invention, les pilotes disposent d'un moyen mobile, adaptable pour interagir à distance, avec différents type de fenêtres qui s'affichent sur les différents écrans du système de visualisation du cockpit de l'aéronef ainsi qu'avec des surfaces de type HUD (pour heads-up display) ou tout autre fenêtre susceptible d'être affichée en dehors de la planche de bord. Le dispositif selon l'invention comporte en outre au moins un moyen de commande permettant de déplacer un curseur dans une fenêtre d'affichage ainsi que d'une fenêtre à une autre. Ce moyen de commande est par exemple un dispositif de pointage et/ou un clavier pour commander l'interaction à distance avec un élément interactif virtuel contenu dans la fenêtre affichée sur l'écran. Le procédé selon l'invention comporte une étape consistant à transférer au moins une fenêtre affichée sur l'écran du système de visualisation du cockpit de l'aéronef vers un dispositif mobile de commande et d'interaction de manière à interagir, à distance, à partir dudit dispositif mobile de commande et d'interaction, avec l'élément interactif virtuel contenu dans la fenêtre transférée, et/ou à afficher l'information d'état du système embarqué de l'aéronef sur ledit dispositif mobile de commande et d'interaction.
Dans un mode préféré de réalisation, le procédé selon l'invention comporte en outre une étape consistant à transférer ladite fenêtre téléchargée du dispositif mobile de commande et d'interaction vers au 5 moins un deuxième dispositif mobile de commande et d'interaction de manière à interagir à distance, à partir dudit deuxième dispositif mobile de commande et d'interaction, avec l'élément interactif virtuel contenu dans la fenêtre transférée, et à afficher 10 l'information d'état du système embarqué de l'aéronef sur ledit deuxième dispositif mobile de commande et d'interaction. Dans une application particulière de l'invention, le procédé est mis en oeuvre pour commander 15 à distance des fonctions de pilotage et d'affichage du tableau de bord d'un aéronef. BRÈVE DESCRIPTION DES DESSINS D'autres caractéristiques et avantages de 20 l'invention ressortiront de la description qui va suivre, prise à titre d'exemple non limitatif, en référence aux figures annexées dans lesquelles : - la figure 1 illustre schématiquement une architecture comportant un dispositif mobile de 25 commande et d'interaction à distance selon l'invention, - la figure 2 illustre schématiquement un exemple de réalisation d'un dispositif mobile de commande et d'interaction à distance selon l'invention. - La figure 3 illustre une interface visuelle implémentée sur le dispositif mobile de commande et d'interaction à distance. - les figures 4 à 6 illustrent schématiquement l'utilisation d'un dispositif mobile de commande et d'interaction à distance de la figure 2 comme dispositif de commande à distance, - les figures 7 à 12 illustrent schématiquement un mode préféré de transfert d'un format d'un écran d'affichage vers un dispositif mobile de commande et d'interaction à distance selon l'invention, - les figures 13 à 15 illustrent schématiquement l'utilisation du dispositif mobile de commande et d'interaction à distance de la figure 2 comme dispositif de configuration d'écrans d'affichage distants fixes ou mobiles, - les figures 16 à 18 illustrent schématiquement un mode préféré de réalisation du transfert de format d'un dispositif mobile de commande et d'interaction à distance selon l'invention vers un écran d'affichage fixe ou mobile afin de configurer ces écrans. EXPOSE DETAILLE DE MODES DE REALISATION PARTICULIERS L'invention sera décrite, par références à la figure 1 illustrant schématiquement un cockpit d'un aéronef comportant plusieurs écrans reliés à un système d'avionique de commande et à un système d'information. Ces écrans peuvent afficher des interfaces des instruments de vol, il s'agit dans ce cas d'écran de type CDS (pour Cockpit Display System) ou interfacer un système informatique de documentation et d'information de vol, il s'agit alors d'écrans EFB (pour Electronic Flight Bag). Ces écrans peuvent correspondre à des écrans fixes ou mobiles du cockpit. En particulier, les écrans de type CDS peuvent être des écrans fixes et les écrans de type EFB peuvent être des écrans mobiles. Chaque écran permet d'afficher des applications différentes ou formats en fonction du type de données à présenter à l'utilisateur, au travers de fenêtres ou éléments interactifs affichés sur l'écran. La navigation dans ces formats d'affichage est réalisée au moyen d'un curseur permettant de sélectionner un objet virtuel sur un format. Les déplacements du curseur sont commandés, par une boule de commande (track ball en anglais) ou un pavé tactile (touchpad en anglais) par exemple. Un dispositif d'activation permet d'activer une action prédéfinie sur un objet virtuel désigné par le curseur. Un dispositif mobile de commande et d'interaction à distance 4, appelé DMCI dans la suite de la description est mis à la disposition de chaque membre de l'équipage. Ce dispositif est adapté pour télécharger un format affiché sur l'un des écrans 2 ou sur un autre DMCI (4a ou 4b) et pour transférer ce format vers d'autres DMCI 4a et 4b. L'utilisateur peut ainsi commander à distance l'ensemble de l'environnement du cockpit, afficher toutes sortes d'information disponibles dans le poste de pilotage relatives à une opération en cours. Ces commandes et ces informations concernent tous les équipements du cockpit et toutes les fonctions concernant les différentes tâches de l'équipage (navigation, pilotage, gestion des systèmes, gestion de la mission, communication."). La figure 2 illustre schématiquement un exemple de réalisation d'un DCMI 4 selon l'invention.
Ce dernier fait partie intégrante du système de commande et de contrôle avionique. A cet effet, un échange permanent de données est assuré entre le système de commande et de contrôle avionique et le DMCI 4. Cet échange permanent de données peut être assuré soit par un fil ou par une technologie sans fil. Dans un premier mode de réalisation, le DMCI 4 est relié au système de commande et de contrôle avionique par un fil afin qu'il puisse non seulement supporter l'échange permanent de données, mais aussi afin de recevoir une alimentation électrique permanente. Cette alimentation peut également être obtenue par une batterie intégrée dans le DMCI 4. Le fil assurant l'échange permanent de données et l'alimentation électrique permanente est préférentiellement intégré dans le DMCI 4. Comme on peut le voir à la figure 2, le DMCI 4 comporte un écran tactile 6 muni de la fonctionnalité multitouche (par exemple, plusieurs doigts, des mains, parties des doigts, ongles ...) supportant des gestes complexes adaptés aux interactions dans le poste de pilotage telles que la manipulation des cartes électroniques. Le DMCI 4 est adapté pour afficher un clavier virtuel permettant à l'utilisateur de saisir des données textuelles et/ des données numériques. Préférentiellement, ce clavier virtuel comporte des caractéristiques haptiques améliorant les interactions par la fourniture d'informations non visuelles permettant une "utilisation en aveugle». Le DMCI 4 comporte en outre des boutons de 5 contrôle supplémentaires offrant un accès direct à certaines fonctionnalités. Ces boutons de contrôle sont préférentiellement matériels et sont utilisés principalement pour réaliser des actions visant à gérer la configuration des écrans. Ceci consiste par exemple 10 à accéder rapidement et efficacement à l'IHM de configuration (donnant accès à toutes les opérations de configuration) (Cl), à récupérer rapidement le dernier format affiché ou à supprimer rapidement le format affiché à la fin de l'interaction avec l'élément 15 interactif de ce format (C2). Les boutons de contrôle sont également utilisés pour réaliser des interactions avec des éléments interactifs (widgets) affichés dans un format. Ceci consiste par exemple à accéder rapidement à des moyens d'interaction indirecte (moyens 20 d'interaction de type trackpad) (C3). Divers réglages tel que la luminosité, la mise en marche et l'arrêt peuvent être commandés par les boutons de contrôle. Certains de ces boutons de contrôle peuvent être multiplexés sur un seul contrôle (C2/C3) pour en 25 limiter le nombre. Notons que l'accès direct aux fonctionnalités décrites ci-dessus peut être obtenu par commande vocale. Le DMCI 4 remplace ainsi plusieurs moyens d'interactions indirectes et les mutualise en un seul dispositif de commande à distance centralisé. 30 Cette mutualisation permet d'améliorer l'ergonomie et l'efficacité des actions des membres de l'équipage en réduisant notablement l'encombrement dans le cockpit. En outre, le DMCI 4 tire profit de l'utilisation d'une interface utilisateur naturelle NUI (pour Natural User Interface en anglais) permettent une interaction tactile directe, quelle que soit la géométrie du cockpit, facilitant ainsi l'accessibilité des informations affichées sur les écrans du cockpit à tous les membres de l'équipage, le DMCI 4 remplissant ainsi une fonction de télécommande.
Pour interagir à distance avec les fonctions de commande, le DMCI 4 récupère les formats de commande et d'affichage comportant le ou les éléments interactifs virtuels et/ou les informations d'état que l'utilisateur souhaite utiliser. La récupération de ces formats est préférentiellement obtenue par des gestes de l'utilisateur produisant un mouvement spécifique du DMCI 4 par rapport à l'écran affichant ces formats. Cet écran peut être l'un des écrans 2 du tableau de bord du cockpit ou encore un écran mobile d'un autre DMCI 4a ou 4b. En raison de la mobilité du DMCI 4, les gestes pris en considération pour la fonction de télécommande tiennent compte de la position et de l'orientation du DMCI 4 dans le cockpit de sorte que la fonction de télécommande reste disponible quelle que soit le contexte opérationnel. Toute action de configuration (transfert, demande d'un format d'affichage sur une ou plusieurs surfaces d'affichage, redimensionnement d'un format, suppression d'un format) est réalisée via une interface 30 de configuration donnant un aperçu global de la configuration du poste de pilotage et un accès à l'ensemble des actions de configuration. Une représentation de cette interface est illustrée par la figure 3. Le DMCI 4 est préférentiellement équipé de capteurs de déplacements qui permettent de déterminer en permanence sa position dans le cockpit afin d'interpréter correctement les gestes de l'utilisateur quelle que soit la position relative du DMCI 4 rapport aux autres écrans fixes ou mobiles dans cockpit.
Dans un autre mode de réalisation, les déplacements et la position relative du DMCI 4 par rapport aux autres écrans fixes ou mobiles dans le cockpit sont détectés par un dispositif externe au DMCI 4, constitué par exemple d'une ou de plusieurs caméras réparties dans le cockpit et dans les autres zones de l'aéronef et reliées au système avionique de commande et au système d'information. En raison de sa mobilité et de sa capacité d'afficher différents types de formats, le DMCI 4 20 fournit à chaque membre de l'équipage une aide pour contrôler toutes les tâches au cours des différentes phases du vol dans des conditions optimales de confort. Le transfert d'une fenêtre affichée sur l'un des écrans 2 vers le DMCI 4 est décrit ci-après 25 par référence aux figures 4 à 6. Ce transfert peut être déclenché par une interaction tactile avec des gestes spécifiques sur un écran 2 ou localement sur le DMCI 4. Ces gestes sont des mouvements de translation définis par la position initiale et la position de destination 30 du format que l'utilisateur souhaite transférer. par le Dans un mode particulier de réalisation, ces gestes sont effectués en utilisant au moins trois doigts afin de distinguer l'action de transfert des actions de commande ou d'affichage qui sont commandées par un ou deux doigts. Sur la figure 4, les flèches 10, 12 et 13, illustrent le déclenchement du transfert d'un format vers le DMCI 4 à partir d'un écran 2 ou d'un autre DMCI 4b par une interaction tactile sur cet écran 2 ou ce DMCI 4b. Sur la figure 5, les flèches 14, 16 et 18, illustrent le déclenchement du transfert d'un format directement sur le DMCI 4a. Ce dernier mode permet d'éviter une interaction tactile sur l'écran 2 ou sur le DMCI 4b. Il est à noter que le transfert d'un format de commande ou d'affichage vers l'écran 6 du DMCI 4 ne modifie pas le format transféré. Ce dernier reste affiché sur l'écran 2 ou sur le deuxième DMCI 4b.
La suppression du format transféré de l'écran 6 du DMCI 4 est optionnelle et peut être réalisée soit par le bouton de commande C2 (schématisé par la croix 18 sur les figures 4 et 6) qui est dédié à cet effet, soit par un geste spécifique réalisant la lettre S (pour supprimer) par exemple. Préférentiellement, ce geste doit être réalisé avec au moins trois doigts. Le symbole 19 (losange) illustre shématiquement un bouton permettant de demander un format donné ou toute autre commande.
Les figures 7 à 12 illustrent schématiquement le principe du transfert vers le DMCI 4 d'un format C parmi une pluralité de formats A, B C, D et E affichés sur un écran distant 2. Dans cet exemple, le format E est le dernier format affiché sur l'écran 6 du DMCI 4 et l'utilisateur souhaite le remplacer par le format C. A cet effet, il touche l'écran 6 avec au moins trois doigts pour initier l'opération de transfert. L'utilisateur effectue ensuite un mouvement de translation dans le sens opposé à la position du format C comme cela est illustré sur la figure 8 par la flèche 20. Ce geste produit l'affichage du format C sur l'écran 6 à la place du format E. Le format C reste cependant disponible sur l'écran 2 pour l'autre membre de l'équipage. A la fin de l'interaction avec l'élément virtuel contenu dans le format C, l'utilisateur peut supprimer ce format de l'écran 6 du DMCI 4 en touchant l'écran avec au mois trois doigts pour initier la suppression (figure 10). La suppression est ensuite déclenchée par un geste réalisant la lettre S (figure 11). A la fin de ce geste, la configuration du tableau de bord du cockpit est modifiée pour tenir compte de cette suppression. Le format E initial est à nouveau affiché sur l'écran 6 (figure 12). Le DMCI 4 peut être utilisé comme télécommande permettant de réaliser une configuration à distance consistant à affecter des formats à des écrans 2 du cockpit ou à d'autres DMCI 4a et 4b. Ceci permet à un pilote de partager un format d'affichage affiché sur son DMCI 4 soit en le transférant sur un écran partagé 2 soit en le transférant vers le DMCI d'un autre membre de l'équipage. Le principe de transfert par gestuelle est illustré par les figures 13 et 14.
Le transfert d'un format à partir d'un DMCI 4 vers un écran ou vers un autre DMCI 4a, 4b est obtenu par des gestes identiques effectués dans le sens contraires de celui des gestes utilisés pour le transfert d'un format à partir d'un écran ou un autre DMCI 4a, 4b vers le DMCI 4 décrit par référence aux figures 4 et 5. L'utilisation du DMCI 4 comme télécommande de configuration est illustrée par la figure 15. L'initialisation de la fonction de configuration est obtenue par le même geste décrit précédemment pour réaliser un transfert de format vers le DMCI 4. Ces actions comportent une requête d'une interface de configuration donnant un aperçu global de la configuration du poste de pilotage et l'accès à l'ensemble des formats affichables, un transfert vers le DMCI 4 du format que le pilote souhaite partager. La modification du format sur l'écran distant est commandée à partir de l'interface de configuration. Les figures 16 à 18 illustrent schématiquement le transfert du format E, affiché sur l'écran 6 du DMCI 4, vers un écran 2 ou un autre DMCI 4a, 4b. Dans cet exemple, après le transfert, le format E occupera l'emplacement du format C. A cet effet, l'utilisateur déclenche le transfert par un contact tactile sur l'écran 6 du DMCI 4 de préférence au moyen de trois doigts (figure 16), puis effectue une translation en direction de la position de la fenêtre C (figure 17) L'utilisateur valide le transfert en cas de succès ou l'annule en cas d'échec. Après le transfert du format E, ce dernier est remplacé sur l'écran 6 du DMCI 4 par le format G qui était affiché préalablement sur cet écran 6. Le DMCI 4 permet aux pilotes d'interagir avec tous les écrans du cockpit dans des positions confortables dans toutes les phases de la navigation via la mobilité. En outre, ce dispositif permet aux membres de l'équipage d'échanger à distance tout type d'information (navigation, pilotage, gestion des systèmes').15

Claims (11)

  1. REVENDICATIONS1. Dispositif mobile de commande et d'interaction à distance (4) avec un système de visualisation d'un cockpit d'aéronef comportant une pluralité d'écrans (2) adaptés pour afficher au moins une fenêtre comportant au moins un élément virtuel de commande et/ou au moins une information d'état d'un système embarqué de l'aéronef, caractérisé en ce qu'il comporte des moyens pour télécharger au moins une fenêtre affichée sur l'un au moins des écrans (2) dudit système de visualisation de manière à interagir à distance avec l'élément interactif virtuel contenu dans la fenêtre téléchargée au moyen dudit dispositif mobile de commande et d'interaction (4) et/ou à afficher l'information d'état du système embarqué de l'aéronef sur ledit dispositif mobile de commande et d'interaction (4).
  2. 2. Dispositif selon la revendication 1 comportant en outre un écran tactile et des moyens pour échanger la fenêtre téléchargée avec au moins un écran (2) du système de visualisation et au moins un deuxième dispositif mobile de commande et d'interaction (4a, 4b) de manière à interagir à distance avec l'élément interactif virtuel contenu dans ladite fenêtre à partir dudit deuxième dispositif mobile de commande et d'interaction (4a, 4b) et/ou à afficher l'information d'état du système embarqué de l'aéronef sur ledit deuxième dispositif mobile de commande et d'interaction (4a, 4b).
  3. 3. Dispositif selon la revendication 2 dans lequel le téléchargement de ladite fenêtre est commandé à partir du dispositif mobile de commande et d'interaction (4a) par un premier mouvement de translation des doigts de l'utilisateur sur l'écran tactile dudit dispositif mobile (4a), ledit premier mouvement de translation étant défini par la position initiale et la position finale de la fenêtre considérée.
  4. 4. Dispositif selon la revendication 2 dans lequel l'échange de la fenêtre téléchargée entre le premier dispositif mobile de commande et d'interaction (4a), l'écran (2), et le deuxième dispositif mobile de 15 commande et d'interaction (4b) est commandé par un deuxième mouvement spécifique de translation prenant en compte les positions relatives initiales et finales des surfaces d'affichage de la fenêtre considérée. 20
  5. 5. Dispositif selon la revendication 3 dans lequel le téléchargement de ladite fenêtre est effectué via une interface homme machine de configuration permettant l'accès à toutes les actions de configurations pour télécharger une fenêtre affichable 25 sur l'écran du système de visualisation d'un cockpit d'aéronef ou sur un deuxième dispositif mobile de commande et d'interaction.
  6. 6. Dispositif selon la revendication 1 30 comportant en outre au moins un moyen de commandepermettant de déplacer un curseur dans une fenêtre d'affichage ainsi que d'une fenêtre à une autre.
  7. 7. Dispositif selon la revendication 6 5 comportant en outre au moins un dispositif d'activation d'une action prédéfinie par un objet virtuel désigné par le curseur.
  8. 8. Procédé d'interaction à distance avec un 10 système de visualisation d'un cockpit d'aéronef comportant une pluralité d'écrans adaptés pour afficher au moins une fenêtre d'interaction comportant au moins un élément virtuel de commande et/ou une information d'état d'un système sous contrôle, procédé caractérisé 15 en ce qu'il comporte une étape consistant à transférer au moins une fenêtre affichée sur l'un au moins desdits écrans (2) dudit système de visualisation vers un dispositif mobile de commande et d'interaction (4) de manière à interagir, à distance, à partir dudit 20 dispositif mobile de commande et d'interaction (4), avec l'élément interactif virtuel contenu dans la fenêtre transférée, et/ou à afficher l'information d'état du système embarqué de l'aéronef sur ledit dispositif mobile de commande et d'interaction (4). 25
  9. 9. Procédé selon la revendication 8 comportant en outre une étape consistant à échanger ladite fenêtre téléchargée entre le dispositif mobile de commande et d'interaction (4a), l' écran (2) et au 30 moins un deuxième dispositif mobile de commande etd'interaction dispositif mobile de commande et d'interaction (4b).
  10. 10. Programme d'ordinateur mémorisé sur un support d'enregistrement et comportant des instructions pour mettre en oeuvre les étapes du procédé selon l'une des revendications 5 à 8 lorsqu'il est exécuté sur un ordinateur.
  11. 11. Aeronef comportant un cockpit muni d'un système de visualisation adapté pour afficher au moins une fenêtre comportant au moins un élément virtuel de commande et/ou au moins une information d'état d'un système embarqué de l'aéronef, caractérisé en ce qu'il comporte un dispositif mobile de commande et d'interaction à distance (4) selon l'une des revendications 1 à 6.
FR1259898A 2012-10-17 2012-10-17 Dispositif et procede d'interaction a distance avec un systeme d'affichage Active FR2996912B1 (fr)

Priority Applications (2)

Application Number Priority Date Filing Date Title
FR1259898A FR2996912B1 (fr) 2012-10-17 2012-10-17 Dispositif et procede d'interaction a distance avec un systeme d'affichage
US14/054,338 US9652127B2 (en) 2012-10-17 2013-10-15 Device and method for remote interaction with a display system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
FR1259898A FR2996912B1 (fr) 2012-10-17 2012-10-17 Dispositif et procede d'interaction a distance avec un systeme d'affichage

Publications (2)

Publication Number Publication Date
FR2996912A1 true FR2996912A1 (fr) 2014-04-18
FR2996912B1 FR2996912B1 (fr) 2014-12-26

Family

ID=47429910

Family Applications (1)

Application Number Title Priority Date Filing Date
FR1259898A Active FR2996912B1 (fr) 2012-10-17 2012-10-17 Dispositif et procede d'interaction a distance avec un systeme d'affichage

Country Status (2)

Country Link
US (1) US9652127B2 (fr)
FR (1) FR2996912B1 (fr)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150355611A1 (en) * 2014-06-06 2015-12-10 Honeywell International Inc. Apparatus and method for combining visualization and interaction in industrial operator consoles
FR3023912B1 (fr) * 2014-07-18 2020-05-08 Thales Calcul de performance pour aeronef
FR3050291B1 (fr) * 2016-04-15 2020-02-28 Thales Procede d'affichage de donnees pour la gestion du vol d'un aeronef, produit programme d'ordinateur et systeme associes
US10235890B1 (en) * 2018-05-11 2019-03-19 Rockwell Collins, Inc. System for navigating an aircraft display with a mobile device
US10956016B1 (en) * 2019-11-14 2021-03-23 Rockwell Collins, Inc. No look touchscreen panel / CDU

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0562929A1 (fr) * 1992-03-26 1993-09-29 Sextant Avionique Procédé et dispositif de communication multimodes et multifonctions entre un opérateur et un ou plusieurs processeurs
GB2451274A (en) * 2007-07-26 2009-01-28 Displaylink A Touchscreen and One or More Conventional Displays
US20100325574A1 (en) * 2009-06-17 2010-12-23 Brigham Young University Presentation scratch spaces
EP2372527A1 (fr) * 2010-03-30 2011-10-05 Airbus Operations Système d'affichage de graphiques sur écran, dispositifs et procédés associés
US8264376B1 (en) * 2008-06-06 2012-09-11 Garmin International, Inc. Avionics control and display unit

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0582929A1 (fr) 1992-08-08 1994-02-16 Hoechst Aktiengesellschaft Procédé pour la préparation d'aminophényl acétates
FR2933211B1 (fr) * 2008-06-26 2010-11-26 Airbus France Dispositif d'interaction avec un systeme d'affichage, notamment pour un systeme d'affichage avionique
WO2010147497A1 (fr) * 2009-06-19 2010-12-23 Alcatel Lucent Geste sur dispositifs de saisie à effleurement pour fermer une fenêtre ou une application
US8312392B2 (en) * 2009-10-02 2012-11-13 Qualcomm Incorporated User interface gestures and methods for providing file sharing functionality
US8725133B2 (en) * 2011-02-15 2014-05-13 Lg Electronics Inc. Method of transmitting and receiving data, display device and mobile terminal using the same
US8725318B1 (en) * 2011-05-20 2014-05-13 Rockwell Collins, Inc. Systems and methods for incorporating virtual network computing into a cockpit display system and controlling a remote aircraft system with the VNC-incorporated CDS
US20120311038A1 (en) * 2011-06-06 2012-12-06 Trinh Trung Tim Proximity Session Mobility Extension

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0562929A1 (fr) * 1992-03-26 1993-09-29 Sextant Avionique Procédé et dispositif de communication multimodes et multifonctions entre un opérateur et un ou plusieurs processeurs
GB2451274A (en) * 2007-07-26 2009-01-28 Displaylink A Touchscreen and One or More Conventional Displays
US8264376B1 (en) * 2008-06-06 2012-09-11 Garmin International, Inc. Avionics control and display unit
US20100325574A1 (en) * 2009-06-17 2010-12-23 Brigham Young University Presentation scratch spaces
EP2372527A1 (fr) * 2010-03-30 2011-10-05 Airbus Operations Système d'affichage de graphiques sur écran, dispositifs et procédés associés

Also Published As

Publication number Publication date
US9652127B2 (en) 2017-05-16
US20140108947A1 (en) 2014-04-17
FR2996912B1 (fr) 2014-12-26

Similar Documents

Publication Publication Date Title
EP2989534B1 (fr) Terminal utilisateur et procédé d'affichage associé
US9817548B2 (en) Providing enhanced user interfaces
EP2972717B1 (fr) Interface de commutation de fenêtre
US10747391B2 (en) Method and device for executing applications through application selection screen
FR2996912A1 (fr) Dispositif et procede d'interaction a distance avec un systeme d'affichage
WO2016064857A1 (fr) Opération glisser-déposer améliorée sur un dispositif mobile
EP3912015B1 (fr) Transport interactif
EP3191927B1 (fr) Procédé et dispositif d'exécution d'applications par l'intermédiaire d'un écran de sélection d'application
JP2014523050A (ja) コンテキストベースメニューシステムのためのサブメニュー
US11182073B2 (en) Selection on user interface based on cursor gestures
US20150324068A1 (en) User interface structure (uis) for geographic information system applications
US20220221970A1 (en) User interface modification
US20190236075A1 (en) Hierarchical data structure
EP3214541B1 (fr) Système et procédé de fonctionnement d'un ensemble d'affichage multiple
US9587956B2 (en) Route stabilization scrolling mode
US20140068510A1 (en) Matrix menu
US11042230B2 (en) Cognitive stylus with sensors
US11093041B2 (en) Computer system gesture-based graphical user interface control
AU2017418322B2 (en) Rules based user interface generation
EP3639136B1 (fr) Génération de conteneurs d'interface utilisateur
US20200192560A1 (en) Systems and methods for managing configurations of multiple displays of a vehicle
KR20140117957A (ko) 이중 디스플레이 장치
FR2955186A1 (fr) Dispositif et procede de commande d'un systeme d'information multipointeurs

Legal Events

Date Code Title Description
PLFP Fee payment

Year of fee payment: 4

PLFP Fee payment

Year of fee payment: 5

PLFP Fee payment

Year of fee payment: 6

PLFP Fee payment

Year of fee payment: 7

PLFP Fee payment

Year of fee payment: 8

PLFP Fee payment

Year of fee payment: 9

PLFP Fee payment

Year of fee payment: 10

PLFP Fee payment

Year of fee payment: 11

PLFP Fee payment

Year of fee payment: 12