FR3062734A1 - MESSAGE INTERPRETATION DEVICE WITH CONTEXT CONSIDERATION - Google Patents
MESSAGE INTERPRETATION DEVICE WITH CONTEXT CONSIDERATION Download PDFInfo
- Publication number
- FR3062734A1 FR3062734A1 FR1700110A FR1700110A FR3062734A1 FR 3062734 A1 FR3062734 A1 FR 3062734A1 FR 1700110 A FR1700110 A FR 1700110A FR 1700110 A FR1700110 A FR 1700110A FR 3062734 A1 FR3062734 A1 FR 3062734A1
- Authority
- FR
- France
- Prior art keywords
- message
- transcription
- aircraft
- engine
- candidate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000013518 transcription Methods 0.000 claims abstract description 169
- 230000035897 transcription Effects 0.000 claims abstract description 169
- 238000000034 method Methods 0.000 claims description 26
- 230000006870 function Effects 0.000 claims description 19
- 238000010276 construction Methods 0.000 claims description 15
- 230000006998 cognitive state Effects 0.000 claims description 10
- 238000012423 maintenance Methods 0.000 claims description 8
- 230000004913 activation Effects 0.000 claims description 7
- 230000010365 information processing Effects 0.000 claims description 7
- 238000004519 manufacturing process Methods 0.000 claims description 7
- 238000002360 preparation method Methods 0.000 claims description 7
- 238000004364 calculation method Methods 0.000 claims description 5
- 238000012545 processing Methods 0.000 claims description 5
- 238000013519 translation Methods 0.000 claims description 5
- 238000006243 chemical reaction Methods 0.000 claims description 4
- 230000009849 deactivation Effects 0.000 claims description 4
- 238000005259 measurement Methods 0.000 claims description 2
- 238000012795 verification Methods 0.000 claims 1
- 230000009471 action Effects 0.000 description 10
- 230000008569 process Effects 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 5
- 230000005236 sound signal Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000003213 activating effect Effects 0.000 description 2
- 238000002955 isolation Methods 0.000 description 2
- 230000007257 malfunction Effects 0.000 description 2
- 230000000717 retained effect Effects 0.000 description 2
- 238000007493 shaping process Methods 0.000 description 2
- 230000001755 vocal effect Effects 0.000 description 2
- 230000002618 waking effect Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 239000003795 chemical substances by application Substances 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000003340 mental effect Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004962 physiological condition Effects 0.000 description 1
- 230000035790 physiological processes and functions Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 208000016254 weariness Diseases 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64C—AEROPLANES; HELICOPTERS
- B64C13/00—Control systems or transmitting systems for actuating flying-control surfaces, lift-increasing flaps, air brakes, or spoilers
- B64C13/02—Initiating means
- B64C13/04—Initiating means actuated personally
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/30—Semantic analysis
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/18—Speech classification or search using natural language modelling
- G10L15/183—Speech classification or search using natural language modelling using context dependencies, e.g. language models
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
- B64D43/00—Arrangements or adaptations of instruments
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/226—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
- G10L2015/228—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of application context
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Artificial Intelligence (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Aviation & Aerospace Engineering (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Ce dispositif d'interprétation de message (30) comprend une unité d'acquisition (32) pour l'acquisition d'un message originel exprimé en un langage naturel, un module transcripteur (36) pour la transcription du message originel dans un langage système compréhensible par un système opérationnel (10), et un déterminateur de contexte (34) apte à déterminer au moins une première information contextuelle. Le module transcripteur (36) comprend une pluralité de moteurs de transcription (70, 72, 74) pour transcrire des suites de mots exprimés dans le langage naturel en des messages exprimés dans le langage système, un processeur de contextualisation (78) pour sélectionner, en fonction de la ou chaque première information contextuelle, au moins un moteur de transcription sélectionné, et un processeur de définition du message effectif (80), configuré pour définir le message candidat produit par le moteur de transcription sélectionné ou, dans le cas où plusieurs moteurs de transcription sont sélectionnés, produit par l'un desdits moteurs de transcription sélectionnés, comme constituant le message effectif.This message interpreting device (30) comprises an acquisition unit (32) for acquiring an original message expressed in a natural language, a transcription module (36) for the transcription of the original message in a system language understandable by an operational system (10), and a context determiner (34) capable of determining at least a first contextual information. The transcribing module (36) comprises a plurality of transcription engines (70, 72, 74) for transcribing sequences of words expressed in natural language into messages expressed in the system language, a contextualization processor (78) for selecting, according to the or each first contextual information, at least one selected transcription engine, and an effective message definition processor (80), configured to define the candidate message produced by the selected transcription engine or, if several Transcription engines are selected, produced by one of said selected transcription engines, as constituting the actual message.
Description
© N° de publication : 3 062 734 (à n’utiliser que pour les commandes de reproduction) (© N° d’enregistrement national : 17 00110 ® RÉPUBLIQUE FRANÇAISE© Publication number: 3,062,734 (to be used only for reproduction orders) (© National registration number: 17 00110 ® FRENCH REPUBLIC
INSTITUT NATIONAL DE LA PROPRIÉTÉ INDUSTRIELLENATIONAL INSTITUTE OF INDUSTRIAL PROPERTY
COURBEVOIE © Int Cl8 : G 06 F17/28 (2017.01), G 06 F 17/30, B 64 D 11/00COURBEVOIE © Int Cl 8 : G 06 F17 / 28 (2017.01), G 06 F 17/30, B 64 D 11/00
DEMANDE DE BREVET D'INVENTION A1A1 PATENT APPLICATION
FR 3 062 734 - A1 (54/ DISPOSITIF D'INTERPRETATION DE MESSAGE AVEC PRISE EN COMPTE DU CONTEXTE.FR 3 062 734 - A1 (54 / MESSAGE INTERPRETATION DEVICE WITH TAKING INTO ACCOUNT THE CONTEXT.
(© Ce dispositif d'interprétation de message (30) comprend une unité d'acquisition (32) pour l'acquisition d'un message originel exprimé en un langage naturel, un module transcripteur (36) pour la transcription du message originel dans un langage système compréhensible par un système opérationnel (10), et un déterminateur de contexte (34) apte à déterminer au moins une première information contextuelle. Le module transcripteur (36) comprend une pluralité de moteurs de transcription (70, 72, 74) pour transcrire des suites de mots exprimés dans le langage naturel en des messages exprimés dans le langage système, un processeur de contextualisation (78) pour sélectionner, en fonction de la ou chaque première information contextuelle, au moins un moteur de transcription sélectionné, et un processeur de définition du message effectif (80), configuré pour définir le message candidat produit par le moteur de transcription sélectionné ou, dans le cas où plusieurs moteurs de transcription sont sélectionnés, produit par l'un desdits moteurs de transcription sélectionnés, comme constituant le message effectif.(© This message interpretation device (30) comprises an acquisition unit (32) for the acquisition of an original message expressed in a natural language, a transcription module (36) for the transcription of the original message in a system language understandable by an operational system (10), and a context determiner (34) capable of determining at least one first contextual information The transcription module (36) comprises a plurality of transcription engines (70, 72, 74) for transcribing sequences of words expressed in natural language into messages expressed in system language, a contextualization processor (78) for selecting, according to the or each first contextual information, at least one selected transcription engine, and a processor defining the effective message (80), configured to define the candidate message produced by the selected transcription engine or, in the case where several moteu transcription rs are selected, produced by one of said selected transcription engines, as constituting the effective message.
Dispositif d’interprétation de message avec prise en compte du contexteMessage interpretation device taking into account the context
La présente invention concerne un dispositif d’interprétation de message pour la conversion d’un message originel destiné à un système opérationnel et constitué par une suite de mots exprimés dans un langage naturel en un message effectif exprimé dans un langage système compréhensible par le système opérationnel, le dispositif d’interprétation de message étant du type une unité d’acquisition pour l’acquisition du message originel, un module transcripteur pour la transcription du message originel dans le langage système, et un déterminateur de contexte apte à déterminer au moins une première information contextuelle.The present invention relates to a message interpretation device for converting an original message intended for an operational system and consisting of a series of words expressed in a natural language into an effective message expressed in a system language understandable by the operational system. , the message interpretation device being of the type an acquisition unit for the acquisition of the original message, a transcription module for the transcription of the original message in the system language, and a context determiner capable of determining at least a first contextual information.
L’invention concerne également un procédé d’interprétation d’un message originel destiné à un système opérationnel et constitué par une suite de mots exprimés dans un langage naturel, pour la conversion dudit message originel en un message effectif exprimé dans un langage système compréhensible par le système opérationnel, le procédé étant du type comprenant les étapes suivantes :The invention also relates to a method for interpreting an original message intended for an operational system and consisting of a series of words expressed in a natural language, for the conversion of said original message into an effective message expressed in a system language understandable by the operational system, the method being of the type comprising the following steps:
acquisition du message originel, détermination d’au moins une première information contextuelle, et transcription du message originel dans le langage système par un module transcripteur, de manière à former le message effectif.acquisition of the original message, determination of at least first contextual information, and transcription of the original message in the system language by a transcription module, so as to form the effective message.
Les systèmes d’information ou de contrôle utilisent de plus en plus souvent des interfaces vocales pour rendre l’interaction avec l’utilisateur rapide et intuitive. Ces interfaces vocales emploient des dispositifs de reconnaissance vocale automatique pour reconnaître des messages oraux, tels que des requêtes, des commandes ou des réponses, communiqués au système d’information ou de contrôle par l’utilisateur.Information and control systems are increasingly using voice interfaces to make interaction with the user fast and intuitive. These voice interfaces employ automatic voice recognition devices to recognize oral messages, such as requests, commands, or responses, communicated to the information or control system by the user.
Les messages obtenus au moyen de ce type d’interface se retrouvent ainsi constitués d’une suite de mots exprimés dans un langage naturel qui n’est pas directement interprétable par le système opérationnel auquel ils sont destinés. Ces messages doivent donc être traduits dans un langage système compréhensible par le système opérationnel. C’est à ce niveau qu’interviennent les dispositifs d’interprétation du type précité. Pour pouvoir élaborer cette traduction, les modules transcripteurs de ces dispositifs d’interprétation vont procéder à une analyse sémantique des messages originels dans l’objectif d’en découvrir le sens et, ainsi, de pouvoir en déduire le message effectif correspondant.The messages obtained by means of this type of interface are thus made up of a series of words expressed in a natural language which is not directly interpretable by the operational system for which they are intended. These messages must therefore be translated into a system language understandable by the operating system. It is at this level that interpretation devices of the aforementioned type come into play. In order to be able to work out this translation, the transcription modules of these interpretation devices will carry out a semantic analysis of the original messages with the aim of discovering their meaning and, thus, of being able to deduce the corresponding effective message.
Une problématique rencontrée par les concepteurs de ces dispositifs d’interprétation de messages est de permettre aux utilisateurs d’interroger ou de commander le système opérationnel sur le plus grand nombre possible de sujets sans les contraindre dans leur façon de formuler leurs messages et tout en interprétant ces messages en un temps décent et de la manière la plus juste possible. En effet, pour pouvoir procéder à l’analyse sémantique d’un message, les modules transcripteurs doivent faire appel à des thésaurus mettant en relation les termes de la langue utilisée pour exprimer le message avec des paramètres interprétables par le système opérationnel ; de ce fait, plus la langue utilisée pour exprimer le message est riche et plus le nombre de sujets susceptibles d’être traités par le système opérationnel est important, plus la taille des thésaurus augmente, et plus leur traitement nécessite de temps et de puissance de calcul.One problem encountered by the designers of these message interpretation devices is to allow users to interrogate or control the operating system on as many subjects as possible without constraining them in the way they formulate their messages and while interpreting these messages in a decent time and in the fairest way possible. Indeed, to be able to carry out the semantic analysis of a message, the transcriptionist modules must call on thesauri relating the terms of the language used to express the message with parameters interpretable by the operational system; as a result, the richer the language used to express the message and the greater the number of subjects likely to be dealt with by the operating system, the more the size of the thesauri increases, and the more time and power it takes to process them. calculation.
Une solution pour concilier ces objectifs consiste à confier l’analyse sémantique à des serveurs disposant de bases de données et de puissances de calcul suffisantes. Une telle solution est toutefois difficilement utilisable en solution de mobilité lorsqu’il est difficile de se connecter à un serveur distant, comme cela peut être le cas à bord d’un aéronef.One solution to reconcile these objectives is to entrust the semantic analysis to servers with sufficient databases and computing power. However, such a solution is difficult to use in a mobility solution when it is difficult to connect to a remote server, as can be the case on board an aircraft.
Une autre problématique réside dans le fait que les messages formulés sont souvent lacunaires et ne mentionnent pas tous les paramètres nécessaires à leur compréhension. Le dispositif d’interprétation doit alors demander à l’utilisateur des informations complémentaires visant à compléter le message, ce qui empêche une exécution rapide, par le système opérationnel, de la tâche demandée par l’utilisateur, et peut conduire à une lassitude de l’utilisateur.Another problem lies in the fact that the messages formulated are often incomplete and do not mention all the parameters necessary for their understanding. The interpretation device must then ask the user for additional information aimed at completing the message, which prevents rapid execution, by the operating system, of the task requested by the user, and can lead to weariness of the user. 'user.
Un objectif de l’invention est ainsi de permettre l’interprétation, avec un faible temps de latence, de messages formulés dans un langage naturel avec un vocabulaire étendu. Des objectifs supplémentaires consistent à permettre le traitement de sujets variés et l’interprétation de messages lacunaires.An objective of the invention is thus to allow the interpretation, with a low latency time, of messages formulated in a natural language with an extended vocabulary. Additional objectives are to allow the treatment of various subjects and the interpretation of incomplete messages.
A cet effet, l’invention a pour objet un dispositif d’interprétation du type précité, dans lequel le module transcripteur comprend :To this end, the invention relates to an interpretation device of the aforementioned type, in which the transcription module includes:
une pluralité de moteurs de transcription, chacun étant configuré pour transcrire des suites de mots exprimés dans le langage naturel en des messages exprimés dans le langage système, le ou les moteur(s) de transcription comprenant au moins un moteur de transcription candidat apte à transcrire le message originel en un message candidat exprimé dans le langage système, un processeur de contextualisation pour sélectionner, en fonction de la ou chaque première information contextuelle, au moins un moteur de transcription sélectionné parmi le ou les moteur(s) de transcription candidat(s), et un processeur de définition du message effectif, configuré pour définir le message candidat produit par le moteur de transcription sélectionné ou, dans le cas où plusieurs moteurs de transcription sont sélectionnés, produit par l’un desdits moteurs de transcription sélectionnés, comme constituant le message effectif.a plurality of transcription engines, each configured to transcribe sequences of words expressed in natural language into messages expressed in system language, the transcription engine (s) comprising at least one candidate transcription engine capable of transcribing the original message into a candidate message expressed in the system language, a contextualization processor for selecting, as a function of the or each first contextual information item, at least one transcription engine selected from among the candidate transcription engine (s) ), and an effective message definition processor, configured to define the candidate message produced by the selected transcription engine or, in the case where several transcription engines are selected, produced by one of said selected transcription engines, as constituent the actual message.
Selon des modes de réalisation particuliers de l’invention, le dispositif d’interprétation présente également l’une ou plusieurs des caractéristiques suivantes, prise(s) isolément ou suivant toute combinaison techniquement possible :According to particular embodiments of the invention, the interpretation device also has one or more of the following characteristics, taken in isolation or in any technically possible combination:
- le module transcripteur comprend au moins une bibliothèque de paramètres regroupant un ensemble de paramètres exprimés dans le langage système et chaque moteur de transcription comprend un outil d’identification de paramètres configuré pour identifier, à partir du message originel, des paramètres de message identifiés parmi les paramètres de message de la bibliothèque de paramètres, et un outil de construction de message configuré pour construire le message candidat à partir des paramètres de message identifiés par l’outil d’identification du moteur ;the transcription module includes at least one library of parameters grouping together a set of parameters expressed in the system language and each transcription engine comprises a parameter identification tool configured to identify, from the original message, message parameters identified from the message parameters of the parameter library, and a message construction tool configured to construct the candidate message from the message parameters identified by the engine identification tool;
- le déterminateur de contexte est apte à déterminer au moins une deuxième information contextuelle, et l’outil d’identification d’au moins un des moteurs de transcription est constitué par un outil contextuel configuré pour identifier au moins une partie des paramètres de message identifiés en fonction de la ou des deuxième(s) information(s) contextuelle(s) ;the context determiner is able to determine at least second contextual information, and the identification tool of at least one of the transcription engines is constituted by a contextual tool configured to identify at least part of the identified message parameters based on the second contextual information (s);
- l’outil contextuel est configuré pour :- the contextual tool is configured to:
o identifier, à partir du seul message originel, une première partie des paramètres de message identifiés, o détecter au moins un paramètre de message manquant pour construire un message candidat à partir de la première partie des paramètres de message identifiés, ce paramètre de message manquant ne pouvant pas être déduit du seul message originel, o repérer une catégorie de paramètre à laquelle appartient le ou chaque paramètre de message manquant, et o identifier au sein de la catégorie de paramètre du ou de chaque paramètre de message manquant, en fonction de la ou chaque deuxième information contextuelle, une deuxième partie des paramètres de message identifiés de sorte que les première et deuxième parties soient, en combinaison l’une avec l’autre, suffisantes pour la construction d’un message candidat,o identify, from the original message only, a first part of the identified message parameters, o detect at least one missing message parameter to construct a candidate message from the first part of the identified message parameters, this missing message parameter cannot be deduced from the original message alone, o identify a parameter category to which the or each missing message parameter belongs, and o identify within the parameter category the or each missing message parameter, depending on the or each second contextual information, a second part of the message parameters identified so that the first and second parts are, in combination with each other, sufficient for the construction of a candidate message,
- le processeur de contextualisation est adapté pour attribuer un numéro d’ordre à chaque moteur de transcription candidat en fonction de la ou chaque première information contextuelle, et pour sélectionner le ou chaque moteur de transcription candidat ayant le numéro d’ordre le plus élevé ;- the contextualization processor is adapted to assign an order number to each candidate transcription engine as a function of the or each first contextual information, and to select the or each candidate transcription engine having the highest order number;
- le déterminateur de contexte comprend au moins un élément parmi : un détecteur de regard pour détecter la direction du regard d’un utilisateur, un détecteur de pointage pour détecter une position d’un organe de pointage, une mémoire conservant un historique d’opérations réalisées par le système opérationnel et/ou un historique de conversation, un capteur d’état physiologique et/ou psychologique et/ou cognitif pour mesurer un état physiologique et/ou psychologique et/ou cognitif d’un utilisateur, un déterminateur d’état opérationnel pour déterminer un état courant du système opérationnel, et un planificateur de tâches présentant un plan de tâches planifiées pour être réalisées par le système opérationnel ou par un utilisateur du système opérationnel.the context determiner comprises at least one element among: a gaze detector for detecting the direction of gaze of a user, a pointing detector for detecting a position of a pointing member, a memory keeping an operation history performed by the operational system and / or a conversation history, a physiological and / or psychological and / or cognitive state sensor for measuring a physiological and / or psychological and / or cognitive state of a user, a state determiner operational to determine a current state of the operational system, and a task scheduler presenting a plan of tasks scheduled to be carried out by the operational system or by a user of the operational system.
L’invention a également pour objet un système d’assistance au pilotage d’un aéronef, ou au service en cabine à bord d’un aéronef, ou à la maintenance d’un aéronef, ou à la préparation d’une mission d’aéronef, ou à la fabrication d’un aéronef, comprenant une unité de traitement d’information apte à traiter les informations de messages effectifs exprimés dans un langage système, et un dispositif d’interprétation tel que défini cidessus pour la conversion de messages originels exprimés dans un langage naturel en messages effectifs exprimés dans le langage système.The invention also relates to a system for assisting the piloting of an aircraft, or cabin service on board an aircraft, or the maintenance of an aircraft, or the preparation of a mission. aircraft, or in the manufacture of an aircraft, comprising an information processing unit able to process the information of actual messages expressed in a system language, and an interpretation device as defined above for the conversion of original messages expressed in natural language in actual messages expressed in system language.
Selon un mode de réalisation particulier de l’invention, le système d’assistance présente également la caractéristique suivante :According to a particular embodiment of the invention, the assistance system also has the following characteristic:
- le déterminateur de contexte comprend au moins un élément parmi : un détecteur de phase de vol de l’aéronef, un capteur d’état système apte à déterminer un état système de l’aéronef, un détecteur d’environnement tactique, et une mémoire stockant un objectif de mission de l’aéronef.the context determiner comprises at least one element among: an aircraft flight phase detector, a system state sensor capable of determining a system state of the aircraft, a tactical environment detector, and a memory storing an aircraft mission objective.
L’invention a également pour objet un procédé du type précité, dans lequel le module transcripteur comprend une pluralité de moteurs de transcription, et l’étape de transcription comprend les sous-étapes suivantes :The subject of the invention is also a method of the aforementioned type, in which the transcription module comprises a plurality of transcription engines, and the transcription step comprises the following substeps:
traduction du message originel, par au moins un moteur de transcription candidat parmi le ou les moteur(s) de transcription, en un message candidat exprimé dans le langage système, sélection, en fonction de la ou chaque première information contextuelle, d’au moins un moteur de transcription sélectionné parmi le ou les moteur(s) de transcription candidat(s), et définition du message candidat produit par le moteur de transcription sélectionné ou, dans le cas où plusieurs moteurs de transcription sont sélectionnés, produit par l’un desdits moteurs de transcription sélectionnés, comme constituant le message effectif.translation of the original message, by at least one candidate transcription engine among the transcription engine (s), into a candidate message expressed in the system language, selection, according to the or each first contextual information, of at least a transcription engine selected from among the candidate transcription engine (s), and definition of the candidate message produced by the selected transcription engine or, in the case where several transcription engines are selected, produced by one said transcription engines selected, as constituting the effective message.
Selon des modes de réalisation particuliers de l’invention, le procédé d’interprétation présente également l’une ou plusieurs des caractéristiques suivantes, prise(s) isolément ou suivant toute combinaison techniquement possible :According to particular embodiments of the invention, the interpretation process also has one or more of the following characteristics, taken in isolation or in any technically possible combination:
- le module transcripteur comprend au moins une bibliothèque de paramètres regroupant un ensemble de paramètres de message exprimés dans le langage système, et l’étape de traduction comprend les sous-étapes suivantes :- the transcriptionist module includes at least one library of parameters grouping together a set of message parameters expressed in the system language, and the translation step comprises the following substeps:
o identification, par un outil d’identification d’au moins un moteur de transcription, à partir du message originel, de paramètres de message identifiés parmi les paramètres de message de la bibliothèque de paramètres, et o construction du message candidat à partir des paramètres de message identifiés ;o identification, by an identification tool of at least one transcription engine, from the original message, of message parameters identified from the message parameters of the parameter library, and o construction of the candidate message from the parameters identified messages;
- le procédé d’interprétation comprend une étape supplémentaire de détermination d’au moins une deuxième information contextuelle, et l’étape d’identification des paramètres de message identifiés comprend l’identification d’au moins une partie des paramètres de message identifiés au moyen de la ou des deuxième(s) information(s) contextuelle(s) ;the interpretation method comprises an additional step of determining at least one second contextual item of information, and the step of identifying the identified message parameters comprises the identification of at least part of the message parameters identified by means second or more contextual information (s);
- l’étape d’identification des paramètres de message identifiés comprend les sousétapes successives suivantes :- the step of identifying the identified message parameters includes the following successive sub-steps:
o identification, à partir du seul message originel, d’une première partie des paramètres de message identifiés, o détection d’au moins un paramètre de message manquant pour construire un message candidat à partir de la première partie des paramètres de message identifiés, ce paramètre de message manquant ne pouvant pas être déduit du seul message orginel, o repérage d’une catégorie de paramètre à laquelle appartient le ou chaque paramètre de message manquant, et o identification au sein de la catégorie de paramètre du ou de chaque paramètre de message manquant, au moyen de la ou des deuxième(s) information(s) contextuelle(s), d’une deuxième partie des paramètres de message identifiés, les première et deuxième parties étant, en combinaison l’une avec l’autre, suffisantes pour la construction d’un message candidat.o identification, from the original message only, of a first part of the identified message parameters, o detection of at least one missing message parameter to construct a candidate message from the first part of the identified message parameters, this missing message parameter which cannot be deduced from the single original message, o identification of a parameter category to which the or each missing message parameter belongs, and o identification within the parameter category of the or each message parameter missing, by means of the second contextual information (s), a second part of the identified message parameters, the first and second parts being, in combination with each other, sufficient for the construction of a candidate message.
- l’étape de sélection comprend les sous-étapes suivantes :- the selection step includes the following sub-steps:
o attribution, en fonction de la ou chaque première information contextuelle, d’un numéro d’ordre à chaque moteur de transcription candidat, et o sélection du ou de chaque moteur de transcription candidat ayant le numéro d’ordre le plus élevé ;o allocation, depending on the or each first contextual information, of an order number to each candidate transcription engine, and o selection of or each candidate transcription engine having the highest order number;
- la ou les première(s) information(s) contextuelle(s) comprennent au moins un élément parmi : la direction du regard d’un utilisateur, une position d’un organe de pointage, un historique d’opérations réalisées par le système opérationnel, un historique de conversation, une mesure d’un état physiologique et/ou psychologique et/ou cognitif d’un utilisateur, un état courant du système opérationnel, et un plan de tâches planifiées pour être réalisées par le système opérationnel ou par un utilisateur du système opérationnel ;- the first contextual information (s) include at least one element among: the direction of the gaze of a user, a position of a pointing device, a history of operations performed by the system operational, a conversation history, a measurement of a physiological and / or psychological and / or cognitive state of a user, a current state of the operational system, and a plan of tasks planned to be carried out by the operational system or by a operating system user;
- le procédé comprend, préalablement à l’étape de transcription, une étape d’activation d’au moins un des moteurs de transcription pour former un moteur de transcription actif, le ou chaque moteur de transcription candidat étant formé par un moteur de transcription actif.the method comprises, prior to the transcription step, a step of activating at least one of the transcription engines to form an active transcription engine, the or each candidate transcription engine being formed by an active transcription engine .
L’invention a également pour objet un procédé d’assistance au pilotage d’un aéronef, ou au service en cabine à bord d’un aéronef, ou à la maintenance d’un aéronef, ou à la préparation d’une mission d’aéronef, ou à la fabrication d’un aéronef, comprenant les étapes suivantes :The invention also relates to a method for assisting the piloting of an aircraft, or cabin service on board an aircraft, or the maintenance of an aircraft, or the preparation of a mission of aircraft, or in the manufacture of an aircraft, comprising the following steps:
interprétation, au moyen d’un procédé d’interprétation tel que défini ci-dessus, d’un message originel constitué d’une suite de mots exprimés dans un langage naturel en un message effectif compréhensible par un système opérationnel constitué par un système d’assistance au pilotage dudit aéronef ou par un système d’assistance audit service en cabine à bord de l’aéronef ou par un système d’assistance à la maintenance dudit aéronef ou par un système d’assistance à ladite préparation d’une mission d’aéronef ou par un système d’assistance à ladite fabrication d’aéronef, et traitement, par une unité de traitement d’information du système opérationnel, du message effectif.interpretation, by means of an interpretation process as defined above, of an original message consisting of a series of words expressed in natural language into an effective message understandable by an operational system constituted by a system of assistance in piloting said aircraft or by a system for assisting said cabin service on board the aircraft or by a system for assisting in the maintenance of said aircraft or by a system for assisting in the preparation of a mission of aircraft or by an assistance system for said aircraft manufacturing, and processing, by an information processing unit of the operational system, of the effective message.
Selon un mode de réalisation particulier de l’invention, le procédé d’assistance présente également la caractéristique suivante :According to a particular embodiment of the invention, the assistance method also has the following characteristic:
- la ou les première(s) information(s) contextuelle(s) comprennent au moins un élément parmi : une phase de vol de l’aéronef, un état système de l’aéronef, la fréquence de réalisation d’une opération en fonction de l’état système de l’aéronef, une situation d’environnement tactique de l’aéronef, et un objectif de mission de l’aéronef.- the first contextual information (s) comprise at least one element among: a flight phase of the aircraft, a system state of the aircraft, the frequency of carrying out an operation as a function of the system state of the aircraft, a situation of the tactical environment of the aircraft, and a mission objective of the aircraft.
D’autres caractéristiques et avantages apparaîtront à la lecture de la description qui va suivre, donnée uniquement à titre d’exemple et faite en se référant aux dessins annexés, dans lesquels :Other characteristics and advantages will appear on reading the description which follows, given solely by way of example and made with reference to the appended drawings, in which:
la Figure 1 est une représentation schématique d’un système d’assistance au pilotage d’un aéronef selon l’invention, la Figure 2 est un diagramme en blocs illustrant un procédé d’assistance au pilotage d’un aéronef mis en œuvre par le système d’assistance au pilotage de la Figure 1, et les Figures 3 et 4 sont des exemples d’affichage sur un écran du système d’assistance au pilotage de la Figure 1.FIG. 1 is a schematic representation of a system for assisting the piloting of an aircraft according to the invention, FIG. 2 is a block diagram illustrating a method of assisting the piloting of an aircraft implemented by piloting assistance system of FIG. 1, and FIGS. 3 and 4 are examples of display on a screen of the piloting assistance system of FIG. 1.
Sur les figures 3 et 4, les écrans d’affichage sont illustratifs de systèmes d’assistance au pilotage d’aéronefs réels, et sont donc en langue anglaise, conformément à l’affichage standard dans le domaine aéronautique. Une traduction en français des indications pertinentes est donnée dans la description qui suit.In FIGS. 3 and 4, the display screens are illustrative of piloting assistance systems for real aircraft, and are therefore in English, in accordance with standard display in the aeronautical field. A translation into French of the relevant indications is given in the description which follows.
Le système d’assistance 10, représenté sur la Figure 1, est, dans l’exemple représenté, un système d’assistance au pilotage d’un aéronef. II est typiquement intégré au cockpit d’un aéronef, ou à une station au sol pour le pilotage à distance d’au moins un véhicule aérien. En variante (non représentée), le système d’assistance 10 est un système d’assistance au service en cabine à bord d’un aéronef et comprend typiquement un système de divertissement et/ou un robot de service. En variante encore (non représentée), le système d’assistance 10 est un système d’assistance à la maintenance d’un aéronef, adapté pour réaliser des opérations de maintenance (telles que des réparations) et/ou de soutien (telles que des ravitaillements ou d’autres opérations de routine permettant la mise en vol) de l’aéronef. Selon encore une variante, le système d’assistance 10 est un système d’assistance à la préparation d’une mission d’aéronef. Selon une variante supplémentaire, le système d’assistance 10 est un système d’assistance à la fabrication d’un aéronef.The assistance system 10, shown in FIG. 1, is, in the example shown, a system for assisting the piloting of an aircraft. It is typically integrated into the cockpit of an aircraft, or into a ground station for the remote control of at least one aerial vehicle. Alternatively (not shown), the assistance system 10 is a cabin service assistance system on board an aircraft and typically comprises an entertainment system and / or a service robot. In another variant (not shown), the assistance system 10 is an assistance system for the maintenance of an aircraft, suitable for carrying out maintenance (such as repairs) and / or support operations (such as refueling or other routine flight operations). According to yet another variant, the assistance system 10 is an assistance system for the preparation of an aircraft mission. According to an additional variant, the assistance system 10 is an assistance system for the manufacture of an aircraft.
Ce système d’assistance 10 comprend, de façon connue, une mémoire 12 stockant une pluralité d’applications 14, 15, 16, 17, 18, un processeur 20 associé à la mémoire 12 pour l’exécution des applications 14, 15, 16, 17, 18, et un dispositif d’affichage 22 pour l’affichage d’informations relatives aux applications 14, 15, 16, 17, 18. Le système d’assistance 10 comprend également des entrées 24 et des sorties 26 pour l’échange de données du système d’assistance 10 avec d’autres équipements de l’aéronef tels que les moteurs, les volets, les aérofreins, les sondes, les radars, le système de géolocalisation, etc.This assistance system 10 comprises, in a known manner, a memory 12 storing a plurality of applications 14, 15, 16, 17, 18, a processor 20 associated with the memory 12 for the execution of the applications 14, 15, 16 , 17, 18, and a display device 22 for displaying information relating to the applications 14, 15, 16, 17, 18. The assistance system 10 also includes inputs 24 and outputs 26 for the exchange of data from the assistance system 10 with other equipment of the aircraft such as engines, flaps, airbrakes, probes, radars, the geolocation system, etc.
Les applications 14, 15,16, 17, 18 comprennent typiquement ;Applications 14, 15, 16, 17, 18 typically include;
une application dite « synoptiques » 14, adaptée pour récupérer des informations relatives à l’état système de l’aéronef et présenter ces informations à l’utilisateur sous forme de synoptiques affichés sur le dispositif d’affichage 22 dans une première fenêtre 14A (Figure 3) lorsque l’application 14 est exécutée par le processeur 20, une application dite « vitesses » 15, adaptée pour commander les vitesses de l’aéronef et pour afficher lesdites vitesses sur le dispositif d’affichage 22 dans une deuxième fenêtre (non représentée) lorsque l’application 15 est exécutée par le processeur 20, une application dite «approche» 16, adaptée pour gérer la phase d’approche de l’aéronef lorsqu’elle est exécutée par le processeur 20, mais aussi pour afficher sur le dispositif d’affichage 22, dans une troisième fenêtre (non représentée), des informations relatives au paramétrage de la phase d’approche, une application dite « navigation » 17, adaptée pour récupérer des informations relatives au trajet suivi par l’aéronef et à l’environnement tactique de l’aéronef, et pour afficher lesdites informations sur le dispositif d’affichage 22 dans une quatrième fenêtre 17A (Figure 3) lorsque l’application 17 est exécutée par le processeur 20, et une application de gestion d’affichage 18, adaptée pour gérer l’affichage d’informations sur le dispositif d’affichage 22 lorsqu’elle est exécutée par le processeur 20.a so-called “synoptic” application 14, adapted to retrieve information relating to the system state of the aircraft and present this information to the user in the form of synoptics displayed on the display device 22 in a first window 14A (FIG. 3) when the application 14 is executed by the processor 20, a so-called “speed” application 15, suitable for controlling the speeds of the aircraft and for displaying said speeds on the display device 22 in a second window (not shown) ) when the application 15 is executed by the processor 20, a so-called “approach” application 16, adapted to manage the approach phase of the aircraft when it is executed by the processor 20, but also to display on the device display 22, in a third window (not shown), of information relating to the configuration of the approach phase, an application called “navigation 17, adapted to retrieve information relating to the path followed by the aircraft and to the tactical environment of the aircraft, and to display said information on the display device 22 in a fourth window 17A (FIG. 3) when the the application 17 is executed by the processor 20, and a display management application 18, adapted to manage the display of information on the display device 22 when it is executed by the processor 20.
En option, la mémoire 12 stocke également d’autres applications (non représentées) adaptées pour être exécutées par le processeur 20 sans toutefois afficher d’informations sur le dispositif d’affichage 22 lorsqu’elles sont exécutées par le processeur 20.Optionally, the memory 12 also stores other applications (not shown) adapted to be executed by the processor 20 without, however, displaying information on the display device 22 when they are executed by the processor 20.
Outre l’exécution des applications 14, 15, 16, 17, 18 mentionnée plus haut, le processeur 20 est également adapté pour traiter les informations de messages destinés au système d’assistance 10 et forme ainsi une unité de traitement d’information.In addition to the execution of the applications 14, 15, 16, 17, 18 mentioned above, the processor 20 is also adapted to process the message information intended for the assistance system 10 and thus forms an information processing unit.
Le dispositif d’affichage 22 est typiquement un écran.The display device 22 is typically a screen.
Le système d’assistance 10 comprend également un dispositif d’interprétation de message 30 pour la conversion d’un message originel constitué par une suite de mots exprimés dans un langage naturel en un message effectif exprimé dans un langage système compréhensible par l’unité de traitement d’information, le message originel étant typiquement constitué par une requête, une instruction ou une réponse.The assistance system 10 also includes a message interpretation device 30 for converting an original message constituted by a series of words expressed in natural language into an effective message expressed in a system language understandable by the unit of information processing, the original message typically being a request, an instruction or a response.
Ce dispositif 30 comprend une unité 32 d’acquisition du message originel, un déterminateur de contexte 34 apte à déterminer des informations contextuelles, et un module transcripteur 36 pour la transcription du message originel dans le langage système.This device 30 comprises a unit 32 for acquiring the original message, a context determiner 34 capable of determining contextual information, and a transcription module 36 for transcribing the original message in the system language.
Dans l'exemple représenté, l’unité d’acquisition 32 est adaptée pour acquérir un message oral. A cet effet, l’unité d’acquisition 32 est constituée par un dispositif de reconnaissance vocale automatique comprenant typiquement un microphone 37 pour la capture d’un signal audio, un organe 38 de mise en forme du signal audio, et un décodeur linguistique 39. En particulier, l’unité d’acquisition 32 est avantageusement constituée par un dispositif de reconnaissance vocale automatique tel que décrit dans la demande de brevet française portant le numéro de dépôt 15 01907.In the example shown, the acquisition unit 32 is adapted to acquire an oral message. To this end, the acquisition unit 32 is constituted by an automatic voice recognition device typically comprising a microphone 37 for capturing an audio signal, a member 38 for shaping the audio signal, and a linguistic decoder 39 In particular, the acquisition unit 32 is advantageously constituted by an automatic voice recognition device as described in the French patent application bearing the filing number 15 01907.
Le déterminateur de contexte 34 est adapté pour déterminer au moins une information contextuelle, de préférence de plusieurs informations contextuelles. Ces informations contextuelles permettent de déterminer le contexte dans lequel un message oral est prononcé par un utilisateur, et au moins une partie de ces informations contextuelles est indépendante du signal audio.The context determiner 34 is adapted to determine at least one contextual information, preferably several contextual information. This contextual information makes it possible to determine the context in which an oral message is spoken by a user, and at least part of this contextual information is independent of the audio signal.
Une première information contextuelle que le déterminateur de contexte 34 est apte à déterminer est constituée par la direction du regard d’un utilisateur, que le regard soit orienté vers un élément graphique affiché sur le dispositif d’affichage 22, un élément extérieur à l’aéronef, ou une zone du cockpit. A cet effet, le déterminateur de contexte 34 comprend avantageusement un détecteur de regard 40, adapté pour détecter la direction du regard de l’utilisateur. En variante (non représentée), le déterminateur de contexte 34 comprend un détecteur de pointage, adapté pour détecter la position d’un organe de pointage tel qu’un curseur sur le dispositif d’affichage 22, l’information contextuelle étant alors constituée par ladite position de l’organe de pointage.First contextual information that the context determiner 34 is able to determine is constituted by the direction of the gaze of a user, whether the gaze is directed towards a graphic element displayed on the display device 22, an element external to the aircraft, or a cockpit area. To this end, the context determiner 34 advantageously comprises a gaze detector 40, adapted to detect the direction of gaze of the user. As a variant (not shown), the context determiner 34 comprises a pointing detector, adapted to detect the position of a pointing member such as a cursor on the display device 22, the contextual information then being constituted by said position of the pointing member.
De préférence, le déterminateur de contexte 34 est également propre à déterminer des informations contextuelles constituées par un historique 44 d’opérations réalisées par le système d’assistance 10, un historique de conversation 46, une fréquence de réalisation d’une opération en fonction de l’état système de l’aéronef, et/ou un objectif de mission 48, où l'historique d’opérations 44 comprend typiquement l'historique des opérations réalisées par le système d’assistance 10 automatiquement ou sur instruction de l’utilisateur, et l’historique de conversation 46 comprend typiquement un historique récent des conversations survenues dans le cockpit de l’aéronef, notamment des conversations entre membres d’équipage et avec les services de contrôle de la circulation aérienne. A cet effet, le déterminateur de contexte 34 comprend une mémoire 42 conservant l'historique d’opérations 44, l’historique de conversation 46, l'historique d’états système 47, et/ou l’objectif de mission 48.Preferably, the context determiner 34 is also capable of determining contextual information constituted by a history 44 of operations performed by the assistance system 10, a conversation history 46, a frequency of performance of an operation as a function of the system state of the aircraft, and / or a mission objective 48, where the history of operations 44 typically includes the history of operations carried out by the assistance system 10 automatically or on instruction from the user, and conversation history 46 typically includes a recent history of conversations that occurred in the cockpit of the aircraft, including conversations between crew members and with air traffic control services. To this end, the context determiner 34 includes a memory 42 keeping the operation history 44, the conversation history 46, the system state history 47, and / or the mission objective 48.
Le déterminateur de contexte 34 est également propre à déterminer une information contextuelle constituée par un état physiologique, un état psychologique reflétant une intention mentale de l’utilisateur, et/ou un état cognitif de l’utilisateur. Une telle information contextuelle est typiquement constituée par le diamètre pupillaire de l’utilisateur ou par une carte des régions actives du cerveau de l’utilisateur. A cet effet, le déterminateur de contexte 34 comprend un capteur d’état physiologique, psychologique et/ou cognitif 50. Ce capteur 50 comprend typiquement un électroencéphalographe, un électrocardiographe et/ou un oculomètre (non représentés).The context determiner 34 is also suitable for determining contextual information consisting of a physiological state, a psychological state reflecting a mental intention of the user, and / or a cognitive state of the user. Such contextual information is typically constituted by the pupil diameter of the user or by a map of the active regions of the user's brain. To this end, the context determiner 34 comprises a physiological, psychological and / or cognitive state sensor 50. This sensor 50 typically comprises an electroencephalograph, an electrocardiograph and / or an oculometer (not shown).
Le déterminateur de contexte 34 est encore propre à déterminer une information contextuelle constituée par un état courant du système d’assistance 10. A cet effet, le déterminateur de contexte 34 comprend un déterminateur d’état opérationnel 52.The context determiner 34 is also suitable for determining contextual information constituted by a current state of the assistance system 10. For this purpose, the context determiner 34 comprises an operational state determiner 52.
Le déterminateur de contexte 34 est également propre à déterminer une information contextuelle constituée par ledit plan de tâches. A cet effet, le déterminateur de contexte 34 comprend un planificateur de tâches 54 présentant un plan de tâches planifiées pour être réalisées par le système d’assistance 10 ou par l’utilisateur du système d’assistance 10.The context determiner 34 is also suitable for determining contextual information constituted by said task plan. To this end, the context determiner 34 includes a task planner 54 presenting a plan of tasks scheduled to be carried out by the assistance system 10 or by the user of the assistance system 10.
Le déterminateur de contexte 34 est encore propre à déterminer une information contextuelle constituée par l’état système de l’aéronef. A cet effet, le déterminateur de contexte 34 comprend un détecteur 56 d’état système de l’aéronef, apte à dialoguer avec les autres équipements de l’aéronef via les entrées et sorties 24, 26 du système d’assistance 10.The context determiner 34 is also capable of determining contextual information constituted by the system state of the aircraft. To this end, the context determiner 34 includes a system state detector 56 of the aircraft, capable of communicating with the other equipment of the aircraft via the inputs and outputs 24, 26 of the assistance system 10.
Enfin, le déterminateur de contexte 34 est propre à déterminer une information contextuelle constituée par un contexte de mission de l’aéronef, dont la phase de vol active de l’aéronef et l’environnement tactique de l’aéronef. A cet effet, le déterminateur de contexte 34 comprend un déterminateur du contexte de mission 58 incluant typiquement un détecteur 60 de phase de vol de l’aéronef et un détecteur d’environnement tactique 62.Finally, the context determiner 34 is capable of determining contextual information constituted by a mission context of the aircraft, including the active flight phase of the aircraft and the tactical environment of the aircraft. To this end, the context determiner 34 comprises a mission context determiner 58 typically including a flight phase detector 60 of the aircraft and a tactical environment detector 62.
Le déterminateur d’état opérationnel 52, le planificateur de tâches 54, le détecteur d’état système 56 et le déterminateur du contexte de mission 58 sont typiquement réalisés sous forme de logiciels stockés dans une mémoire (non représentée) et aptes à être exécutés par un processeur (non représenté) associé à ladite mémoire, le processeur et la mémoire formant une unité de traitement d’information incluse dans le système d’assistance 10. En variante, le déterminateur d’état opérationnel 52, le planificateur de tâches 54, le détecteur d’état système 56 et le déterminateur du contexte de mission 58 sont réalisés, au moins partiellement, sous forme de composants logiques programmables, ou encore de circuits intégrés dédiés, inclus dans le système d’assistance 10.The operational status determiner 52, the task scheduler 54, the system status detector 56 and the mission context determiner 58 are typically produced in the form of software stored in a memory (not shown) and capable of being executed by a processor (not shown) associated with said memory, the processor and the memory forming an information processing unit included in the assistance system 10. As a variant, the operational status determiner 52, the task planner 54, the system state detector 56 and the mission context determiner 58 are produced, at least partially, in the form of programmable logic components, or even dedicated integrated circuits included in the assistance system 10.
Le module transcripteur 36 est quant à lui réalisé, dans l’exemple représenté, sous la forme d’un logiciel stocké dans la mémoire 12 et apte à être exécuté par le processeurThe transcription module 36 is in turn produced, in the example shown, in the form of software stored in memory 12 and capable of being executed by the processor
20. En variante (non représentée), le module transcripteur 36 est réalisé, au moins partiellement, sous forme d’un composant logique programmable, ou encore d’un circuit intégré dédié, inclus dans le système d’assistance 10.20. As a variant (not shown), the transcription module 36 is produced, at least partially, in the form of a programmable logic component, or even of a dedicated integrated circuit, included in the assistance system 10.
Le module transcripteur 36 comprend une pluralité de moteurs de transcription 70, 72, 74, un organe 76 d’activation/désactivation des moteurs de transcription 70, 72, 74, un processeur de contextualisation 78, et un processeur 80 de définition du message effectif.The transcriptionist module 36 comprises a plurality of transcription engines 70, 72, 74, a member 76 for activating / deactivating the transcription engines 70, 72, 74, a contextualization processor 78, and a processor 80 for defining the effective message. .
On notera que, bien que seuls trois moteurs de transcription 70, 72, 74 sont représentés sur la Figure 1, cette valeur est nullement limitative et a pour seul objectif de faciliter la compréhension des dessins. En pratique, le nombre de moteurs de transcription 70, 72, 74 est généralement supérieur à trois.It will be noted that, although only three transcription engines 70, 72, 74 are shown in FIG. 1, this value is in no way limiting and has the sole objective of facilitating the understanding of the drawings. In practice, the number of transcription engines 70, 72, 74 is generally greater than three.
Chaque moteur de transcription 70, 72, 74 est associé à au moins un contexte déduisible d’une information contextuelle déterminée par le déterminateur de contexte 34 ou d’une combinaison d’informations contextuelles déterminées par le déterminateur de contexte 34. Chaque moteur de transcription 70, 72, 74 est également associé à une phase de vol de l’aéronef, à un état système de l’aéronef, et/ou à une application 14, 15, 16, 17, 18. Par exemple, un premier moteur 70 est associé à l’application 14, un deuxième et un troisième moteurs 72, 74 sont associés à la quatrième application 17, des quatrièmes moteurs (non représentés) sont associés chacun à une configuration dégradée de l’aéronef, notamment à un état de baisse de pression dans un circuit de carburant, des cinquièmes moteurs (non représentés) sont associés chacun à un état physiologique, psychologique et/ou cognitif de l’utilisateur, notamment à un état de réveil et à un état de surprise, et des sixièmes moteurs sont associés chacun à un contexte de mission de l'aéronef, notamment à une phase d’attaque et à une phase d’esquive.Each transcription engine 70, 72, 74 is associated with at least one context deducible from contextual information determined by the context determiner 34 or from a combination of contextual information determined by the context determiner 34. Each transcription engine 70, 72, 74 is also associated with a flight phase of the aircraft, with a system state of the aircraft, and / or with an application 14, 15, 16, 17, 18. For example, a first engine 70 is associated with application 14, a second and a third engine 72, 74 are associated with the fourth application 17, fourth engines (not shown) are each associated with a degraded configuration of the aircraft, in particular in a declining state pressure in a fuel system, fifth engines (not shown) are each associated with a physiological, psychological and / or cognitive state of the user, in particular with a state of awakening and with a n state of surprise, and the sixth engines are each associated with an aircraft mission context, in particular an attack phase and a dodge phase.
Chaque moteur de transcription 70, 72, 74 est configuré pour transcrire des suites de mots exprimés dans le langage naturel en des messages exprimés dans le langage système. A cet effet, chaque moteur de transcription 70, 72, 74 comprend au moins une bibliothèque de paramètres 82, un outil 84 d’identification de paramètres, et un outil de construction de message 86.Each transcription engine 70, 72, 74 is configured to transcribe sequences of words expressed in natural language into messages expressed in system language. For this purpose, each transcription engine 70, 72, 74 comprises at least one library of parameters 82, a tool 84 for identifying parameters, and a message construction tool 86.
La bibliothèque de paramètres 82 de chaque moteur de transcription 70, 72, 74 regroupe un ensemble de paramètres de message (non représentés) exprimés dans le langage système et regroupés par catégories. Une première catégorie regroupe typiquement des actions réalisables par le système d’assistance 10, comme par exemple afficher, zoomer, sélectionner. D’autres catégories regroupent quant à elles des objets auxquels sont applicables ces actions, lesdits objets étant regroupés selon le type d’action qui leur est applicable ; une catégorie regroupe ainsi par exemple les objets qui peuvent être affichés, une autre les objets sur lesquels il est possible de zoomer, et une troisième les objets qui peuvent être sélectionnés. Encore d’autres catégories regroupent des états applicables aux objets, comme par exemple un statut prioritaire ou un affichage en plein écran ; de préférence, ces états sont regroupés en fonction du type d’objet auxquels ils sont applicables et de l’action dont ils dépendent.The parameter library 82 of each transcription engine 70, 72, 74 groups together a set of message parameters (not shown) expressed in the system language and grouped by categories. A first category typically groups together actions that can be performed by the assistance system 10, such as displaying, zooming, selecting. Other categories group together objects to which these actions are applicable, said objects being grouped according to the type of action which is applicable to them; a category thus gathers for example the objects which can be displayed, another the objects on which it is possible to zoom, and a third the objects which can be selected. Still other categories group states applicable to objects, such as a priority status or a full screen display; Preferably, these states are grouped according to the type of object to which they are applicable and the action on which they depend.
L’outil d’identification 84 de chaque moteur de transcription 70, 72, 74 est configuré pour identifier, à partir d’une suite de mots, des paramètres de message identifiés parmi les paramètres de message de la bibliothèque de paramètres 82 du moteur 70, 72, 74. A cet effet, l’outil d’identification 84 est configuré pour réaliser une analyse syntagmatique de la suite de mots, de manière à reconnaître des syntagmes dans cette suite de mots, et, pour au moins un syntagme reconnu, identifier parmi les paramètres de message de la bibliothèque 82 un paramètre de message correspondant au syntagme.The identification tool 84 of each transcription engine 70, 72, 74 is configured to identify, from a series of words, message parameters identified from the message parameters of the parameter library 82 of the engine 70 , 72, 74. For this purpose, the identification tool 84 is configured to perform a syntagmatic analysis of the sequence of words, so as to recognize syntagms in this sequence of words, and, for at least one recognized syntagm, identify among the message parameters of the library 82 a message parameter corresponding to the phrase.
En variante (non représentée), le module transcripteur 36 comprend une unique bibliothèque de paramètres commune à tous les moteurs de transcription 70, 72, 74. Dans ce cas, les paramètres de message sont classés au sein de cette bibliothèque en différentes classes chacune associée à au moins un contexte déduisible d’une information contextuelle déterminée par le déterminateur de contexte 34 ou d’une combinaison d’informations contextuelles déterminées par le déterminateur de contexte 34. L’outil d’identification 84 de chaque moteur de transcription 70, 72, 74 est alors configuré pour n’identifier des paramètres de message correspondant aux syntagmes de la suite de mot qu’au sein des seules classes associées au(x) même(s) contexte(s) que ledit moteur de transcription 70, 72, 74.As a variant (not shown), the transcription module 36 includes a single library of parameters common to all the transcription engines 70, 72, 74. In this case, the message parameters are classified within this library into different classes each associated at least one context deducible from contextual information determined by the context determiner 34 or from a combination of contextual information determined by the context determiner 34. The identification tool 84 of each transcription engine 70, 72 , 74 is then configured to identify message parameters corresponding to the syntagms of the word sequence only within the only classes associated with the same context (s) as said transcription engine 70, 72, 74.
En particulier, afin de permettre l’identification du paramètre de message correspondant au syntagme, l’outil d’identification 84 dispose avantageusement d’une bibliothèque de paradigmes (non représentée), dans laquelle sont stockés des paradigmes de référence, chaque paradigme de référence étant associé à un paramètre de message de la bibliothèque 82, et l’outil d’identification 84 est configuré pour calculer une proximité paradigmatique du syntagme reconnu avec au moins une partie des paradigmes de référence, et pour désigner comme paramètre de message identifié le paramètre de message auquel est associé le paradigme de référence dont le syntagme reconnu est le plus proche. Les paradigmes de référence sont de préférence classés selon des catégories correspondant aux catégories de paramètres de message, et l’outil d’identification 84 est configuré pour calculer la proximité paradigmatique du syntagme reconnu avec uniquement des paradigmes de référence appartenant à une catégorie spécifique choisie en fonction du type de syntagme ; ainsi, par exemple, dans le cas où le syntagme reconnu est un syntagme verbal, l’outil d’identification 84 ne calculera la proximité paradigmatique de ce syntagme qu’avec les paradigmes de référence correspondant à des paramètres d’action.In particular, in order to allow the identification of the message parameter corresponding to the phrase, the identification tool 84 advantageously has a library of paradigms (not shown), in which are stored reference paradigms, each reference paradigm being associated with a message parameter of the library 82, and the identification tool 84 is configured to calculate a paradigmatic proximity of the recognized phrase with at least some of the reference paradigms, and to designate as parameter of identified message the parameter message to which is associated the reference paradigm whose recognized phrase is closest. The reference paradigms are preferably classified according to categories corresponding to the categories of message parameters, and the identification tool 84 is configured to calculate the paradigmatic proximity of the recognized phrase with only reference paradigms belonging to a specific category chosen in depending on the type of phrase; thus, for example, in the case where the recognized syntagm is a verbal syntagm, the identification tool 84 will calculate the paradigmatic proximity of this syntagm only with the reference paradigms corresponding to action parameters.
Avantageusement, l’outil d’identification 84 de chaque moteur de transcription 70, 72, 74 est constitué par un outil contextuel configuré pour construire le message candidat en fonction d’au moins une information contextuelle primaire déterminée par le déterminateur de contexte 34. A cet effet, l’outil contextuel est typiquement configuré pour :Advantageously, the identification tool 84 of each transcription engine 70, 72, 74 is constituted by a contextual tool configured to construct the candidate message as a function of at least one primary contextual information determined by the context determiner 34. A For this purpose, the contextual tool is typically configured to:
identifier, à partir de la seule suite de mots, une première partie des paramètres de message identifiés, détecter au moins un paramètre de message manquant pour construire un message candidat à partir de la première partie des paramètres de message identifiés, ce paramètre de message manquant ne pouvant pas être déduit de la seule suite de mots, repérer une catégorie de paramètre à laquelle appartient le ou chaque paramètre de message manquant, et identifier au sein de la catégorie de paramètre du ou de chaque paramètre de message manquant, en fonction de la ou chaque information contextuelle primaire, une deuxième partie des paramètres de message identifiés de sorte que les première et deuxième parties soient, en combinaison l’une avec l’autre, suffisantes pour la construction d’un message candidat.identify, from the word sequence alone, a first part of the identified message parameters, detect at least one missing message parameter to construct a candidate message from the first part of the identified message parameters, this missing message parameter cannot be deduced from a single series of words, identify a parameter category to which the or each missing message parameter belongs, and identify within the parameter category of the or each missing message parameter, depending on the or each primary contextual information, a second part of the message parameters identified so that the first and second parts are, in combination with each other, sufficient for the construction of a candidate message.
Pour finir, l’outil de construction de message 86 de chaque moteur de transcription 70, 72, 74 est configuré pour construire un message candidat à partir des paramètres de message identifiés par l’outil d’identification 84 du moteur 70, 72, 74.Finally, the message construction tool 86 of each transcription engine 70, 72, 74 is configured to construct a candidate message from the message parameters identified by the identification tool 84 of the engine 70, 72, 74 .
Avantageusement, l’outil de construction de message 86 est également configuré pour calculer un score de pertinence du message candidat, ce score de pertinence étant typiquement calculé en fonction des proximités paradigmatiques calculées par l’outil d’identification 84 entre chaque syntagme de la suite de mots et le paradigme de référence le plus proche de ce syntagme ; par exemple, le score de pertinence est ainsi égal à la somme des proximités paradigmatiques calculées. Optionnellement, le score de pertinence est également fonction de l’adéquation entre le message candidat et le contexte.Advantageously, the message construction tool 86 is also configured to calculate a relevance score for the candidate message, this relevance score being typically calculated as a function of the paradigmatic proximities calculated by the identification tool 84 between each phrase of the sequence of words and the paradigm of reference closest to this syntagm; for example, the relevance score is thus equal to the sum of the paradigmatic proximities calculated. Optionally, the relevance score is also a function of the adequacy between the candidate message and the context.
L’organe d’activation/désactivation 76 est adapté pour activer certains des moteurs de transcription 70, 72, 74, les moteurs de transcription ainsi activés formant des moteurs de transcription actifs, et pour désactiver certains des moteurs de transcription actifs en fonction des informations contextuelles fournies par le déterminateur de contexte 34. L’organe d’activation/désactivation 76 est en particulier adapté pour activer les moteurs de transcription 70, 72, 74 associés à la phase de vol dans laquelle l’aéronef se trouve, à l’état système de l’aéronef, et/ou aux applications 14, 15, 16, 17, 18 affichées sur le dispositif d’affichage 22, et pour désactiver les moteurs de transcription 70, 72, 74 associés à des phases de vol et à des états systèmes autres que ceux dans lesquels l’aéronef se trouve, ou associés à des applications désactivées.The activation / deactivation member 76 is adapted to activate some of the transcription engines 70, 72, 74, the transcription engines thus activated forming active transcription engines, and to deactivate some of the active transcription engines as a function of the information. contextual provided by the context determiner 34. The activation / deactivation member 76 is in particular adapted to activate the transcription engines 70, 72, 74 associated with the flight phase in which the aircraft is located, at the system state of the aircraft, and / or to the applications 14, 15, 16, 17, 18 displayed on the display device 22, and for deactivating the transcription engines 70, 72, 74 associated with flight phases and system states other than those in which the aircraft is located, or associated with deactivated applications.
On notera que, bien qu’il ait été indiqué précédemment que chaque moteur de transcription 70, 72, 74 est configuré pour transcrire des suites de mots exprimés dans le langage naturel en des messages exprimés dans le langage système, chaque moteur 70, 72, 74 n’est pas nécessairement adapté pour réaliser une telle transcription sur toute suite de mots. II est donc possible que, lorsqu’un message originel est formulé, tous les modules de transcription 70, 72, 74 qui sont actifs à ce moment-là ne soient pas en mesure de transcrire ce message originel en un message candidat. On désignera dans la suite sous le vocable de « modules candidats » les modules de transcription qui sont actifs lorsqu’un message originel est formulé et aptes à transcrire ce message originel en un message candidat.It will be noted that, although it has been indicated previously that each transcription engine 70, 72, 74 is configured to transcribe sequences of words expressed in natural language into messages expressed in system language, each engine 70, 72, 74 is not necessarily suitable for carrying out such a transcription on any series of words. It is therefore possible that, when an original message is formulated, all the transcription modules 70, 72, 74 which are active at that time will not be able to transcribe this original message into a candidate message. In the following, the term “candidate modules” will designate the transcription modules which are active when an original message is formulated and capable of transcribing this original message into a candidate message.
Le processeur de contextualisation 78 est configuré pour sélectionner, en fonction d’au moins une information contextuelle secondaire déterminée par le déterminateur de contexte 34, au moins un moteur de transcription sélectionné parmi le ou les moteur(s) de transcription candidat(s).The contextualization processor 78 is configured to select, as a function of at least one secondary contextual information determined by the context determiner 34, at least one transcription engine selected from among the candidate transcription engine (s).
A cet effet, le processeur de contextualisation 78 est configuré pour attribuer un numéro d’ordre à chaque moteur de transcription actif en fonction de la ou chaque information contextuelle secondaire, ce numéro d’ordre reflétant la probabilité que l’utilisateur, compte-tenu du contexte, émette un message susceptible d’être transcrit par le moteur de transcription actif, et pour sélectionner le ou chaque moteur de transcription candidat ayant le numéro d’ordre le plus élevé.To this end, the contextualization processor 78 is configured to assign a serial number to each active transcription engine as a function of the or each secondary contextual information, this serial number reflecting the probability that the user, taking into account from the context, issues a message capable of being transcribed by the active transcription engine, and to select the or each candidate transcription engine having the highest order number.
Enfin, le processeur de définition du message effectif 80 est configuré pour définir le message candidat produit par le moteur de transcription sélectionné ou, dans le cas où plusieurs moteurs de transcription sont sélectionnés, produit par l’un desdits moteurs de transcription sélectionnés, comme constituant le message effectif. Dans le cas où plusieurs des moteurs de transcription 70, 72, 74 sont sélectionnés, le processeur de définition 80 est configuré pour définir comme constituant le message effectif le message candidat présentant le score de pertinence le plus élevé.Finally, the effective message definition processor 80 is configured to define the candidate message produced by the selected transcription engine or, in the case where several transcription engines are selected, produced by one of said selected transcription engines, as constituting the actual message. In the case where several of the transcription engines 70, 72, 74 are selected, the definition processor 80 is configured to define as constituting the effective message the candidate message having the highest relevance score.
Un procédé 100 mis en œuvre par le système d’assistance 10 va maintenant être décrit, en référence à la Figure 2.A method 100 implemented by the assistance system 10 will now be described, with reference to FIG. 2.
Lors d’une première étape 110, certaines des applications 14, 15, 16, 17, 18 sont affichées sur le dispositif d’affichage 22. Cette étape est illustrée sur la Figure 3 par 15 l’affichage des fenêtres 14A et 17A associées aux applications 14 et 17. Cette étape 110 fait suite typiquement au démarrage du système d’assistance 10, ou à une modification de l’affichage du dispositif d’affichage 22 commandée par l’utilisateur.During a first step 110, some of the applications 14, 15, 16, 17, 18 are displayed on the display device 22. This step is illustrated in Figure 3 by 15 display windows 14A and 17A associated with applications 14 and 17. This step 110 typically follows the start of the assistance system 10, or a modification of the display of the display device 22 controlled by the user.
L’utilisateur énonce ensuite un message oral destiné au système d’assistance 10. Ce message oral est, dans l’exemple représenté, constitué par l’ordre : « Montre les détails », l’utilisateur regardant à cet instant le point de passage KCVG de l’aéronef. Simultanément à l’émission de ce message oral, il est effectué une étape 120 d’interprétation du message oral par le dispositif d’interprétation de message 30 du système d’assistance 10.The user then utters an oral message intended for the assistance system 10. This oral message is, in the example shown, constituted by the order: "Show the details", the user looking at this point of passage KCVG of the aircraft. Simultaneously with the transmission of this oral message, a step 120 of interpretation of the oral message is carried out by the message interpretation device 30 of the assistance system 10.
Cette étape d’interprétation 120 comprend une première sous-étape 122 d’activation d’une pluralité de moteurs de transcription 70, 72, 74 par l’organe d’activation/désactivation 76. Ladite étape 122 se produit sensiblement concomitamment avec l’étape d’affichage 110.This interpretation step 120 comprises a first sub-step 122 of activation of a plurality of transcription engines 70, 72, 74 by the activation / deactivation member 76. Said step 122 occurs substantially concomitantly with the display step 110.
Cette première sous-étape 122 comprend typiquement les sous-étapes suivantes : désignation d’une pluralité de moteurs de transcription désignés parmi les moteurs de transcription 70, 72, 74, et activation des moteurs de transcription désignés.This first substep 122 typically comprises the following substeps: designation of a plurality of designated transcription engines from among the transcription engines 70, 72, 74, and activation of the designated transcription engines.
La désignation des moteurs de transcription est avantageusement fonction des applications 14, 15, 16, 17 affichées sur le dispositif d’affichage; les moteurs de transcription désignés sont alors les moteurs de transcription associés aux applications affichées. Optionnellement, la désignation est également fonction d’au moins une des informations contextuelles déterminées par le déterminateur de contexte 34, par exemple lorsque cette information contextuelle est une phase de vol de l’aéronef, l’état système de l’aéronef, ou le contexte de mission de l’aéronef ; les moteurs de transcription désignés sont alors les moteurs de transcription associés à un contexte déduisible de l’information contextuelle ou de la combinaison d’informations contextuelles.The designation of the transcription engines is advantageously a function of the applications 14, 15, 16, 17 displayed on the display device; the designated transcription engines are then the transcription engines associated with the applications displayed. Optionally, the designation is also a function of at least one of the contextual information determined by the context determiner 34, for example when this contextual information is a flight phase of the aircraft, the system state of the aircraft, or the aircraft mission context; the designated transcription engines are then the transcription engines associated with a context deducible from the contextual information or from the combination of contextual information.
Optionnellement, des moteurs de transcription actifs sont également désactivés au cours de la même étape 122. Les moteurs de transcription désactivés sont de préférence fonction des applications 14, 15, 16, 17 affichées sur le dispositif d’affichage et, le cas échéant, d’au moins une des informations contextuelles déterminées par le déterminateur de contexte 34, par exemple lorsque cette information contextuelle est une phase de vol de l’aéronef ou l’état système de l’aéronef. Les moteurs de transcription désactivés sont ainsi typiquement des moteurs de transcription associés à une application précédemment affichée sur le dispositif d’affichage 22 et dont la fenêtre a été fermée, ou des moteurs de transcription associés à des contextes déduisibles d’anciennes informations contextuelles mais pas des informations contextuelles courantes.Optionally, active transcription engines are also deactivated during the same step 122. The deactivated transcription engines are preferably a function of the applications 14, 15, 16, 17 displayed on the display device and, where appropriate, d at least one of the contextual information determined by the context determiner 34, for example when this contextual information is a flight phase of the aircraft or the system state of the aircraft. The deactivated transcription engines are thus typically transcription engines associated with an application previously displayed on the display device 22 and whose window has been closed, or transcription engines associated with contexts deducible from old contextual information but not current contextual information.
Cette première sous-étape 122 comprend ainsi, dans l’exemple représenté, la désignation des moteurs de transcription 70, 72, 74 associés aux applications 14 et 17, les moteurs de transcription 72, 74 associés à l’application 17 comprenant un moteur de transcription 72 associé à la gestion des points de passage et un moteur de transcription 74 associé à la gestion de l’environnement tactique de l’aéronef.This first sub-step 122 thus comprises, in the example shown, the designation of the transcription engines 70, 72, 74 associated with applications 14 and 17, the transcription engines 72, 74 associated with application 17 comprising a transcription 72 associated with the management of the waypoints and a transcription engine 74 associated with the management of the tactical environment of the aircraft.
L’étape d’interprétation 120 comprend ensuite une deuxième sous-étape 124 d’acquisition du message oral émis par l’utilisateur. Cette acquisition est réalisée par l’unité d’acquisition 32, qui capte un son incluant le message oral et transcrit ce son en un signal électrique au moyen du microphone 37, met en forme le signal audio, typiquement en le numérisant et en le découpant en trames, au moyen de l’organe de mise en formeThe interpretation step 120 then comprises a second sub-step 124 for acquiring the oral message sent by the user. This acquisition is carried out by the acquisition unit 32, which picks up a sound including the oral message and transcribes this sound into an electrical signal by means of the microphone 37, formats the audio signal, typically by digitizing and cutting it. in frames, by means of the shaping member
38, et convertit ce signal audio en une suite de mots au moyen du décodeur linguistique38, and converts this audio signal into a series of words by means of the linguistic decoder
39.39.
Puis, au cours d’une étape 125, le module transcripteur 36 transcrit la suite de mots composant le message acquis en un message effectif compréhensible par l’unité d’exécution 20.Then, during a step 125, the transcriptionist module 36 transcribes the series of words composing the acquired message into an effective message understandable by the execution unit 20.
Cette étape 125 est effectuée automatiquement, c’est-à-dire sans intervention de l’utilisateur. Elle débute par une première sous-étape 126, au cours de laquelle chacun des moteurs actifs 70, 72, 74 va tenter de traduire le message acquis en un message candidat exprimé dans le langage système.This step 125 is carried out automatically, that is to say without user intervention. It begins with a first sub-step 126, during which each of the active motors 70, 72, 74 will attempt to translate the acquired message into a candidate message expressed in the system language.
Cette sous-étape 126 de construction d’un message candidat est conduite sensiblement simultanément pour tous les moteurs actifs 70, 72, 74. Elle comprend une première étape 127 de détermination, à partir du message acquis, du type de message acquis.This substep 126 of constructing a candidate message is carried out substantially simultaneously for all the active engines 70, 72, 74. It includes a first step 127 of determining, from the acquired message, the type of message acquired.
Au cours de cette première étape 127, l’outil d’identification 84 de chaque moteur actif 70, 72, 74 détermine par analyse syntaxique du message acquis si ce message est une requête, une instruction ou une information. Par exemple, si le message est détecté comme étant interrogatif, l’outil d’identification 84 détermine que ce message constitue une requête, si le message est détecté comme étant injonctif, l’outil d’identification 84 détermine que ce message constitue une instruction, et si le message est détecté comme étant déclaratif ou exclamatif, l’outil d’identification 84 détermine que ce message constitue une information. L’analyse syntaxique de message pour détecter le type interrogatif, injonctif, déclaratif ou exclamatif du message étant connue, cette partie ne sera pas décrite ici plus en détails.During this first step 127, the identification tool 84 of each active engine 70, 72, 74 determines by syntactic analysis of the acquired message whether this message is a request, an instruction or an information. For example, if the message is detected as being interrogative, the identification tool 84 determines that this message constitutes a request, if the message is detected as being injunctive, the identification tool 84 determines that this message constitutes an instruction , and if the message is detected as being declarative or exclamatory, the identification tool 84 determines that this message constitutes information. Since parsing of messages to detect the interrogative, injunctive, declarative or exclamatory type of the message is known, this part will not be described here in more detail.
Dans l’exemple représenté, le message acquis étant injonctif, l’outil d’identification 84 détermine ainsi que ce message constitue une instruction.In the example shown, the acquired message being injunctive, the identification tool 84 thus determines that this message constitutes an instruction.
Puis l’outil d’identification 84 déduit du type du message acquis les types de paramètres à identifier. Dans l’exemple représenté, les paramètres à identifier sont ainsi une action et un objet auquel appliquer l’action.Then the identification tool 84 deduces from the type of message acquired the types of parameters to be identified. In the example shown, the parameters to identify are thus an action and an object to which to apply the action.
Cette première étape 127 est suivie d’une deuxième étape 128 d’identification, à partir du message acquis, de paramètres de message identifiés parmi les paramètres de message stockés dans les bibliothèques de paramètres 82 des différents moteurs actifs 70, 72, 74.This first step 127 is followed by a second step 128 of identifying, from the message acquired, message parameters identified from the message parameters stored in the parameter libraries 82 of the different active engines 70, 72, 74.
Cette étape d’identification 128 débute par une première sous-étape 130 d’identification de premiers paramètres de message à partir de la seule suite de mots constituant le message acquis.This identification step 128 begins with a first sub-step 130 of identification of the first message parameters from the single series of words constituting the acquired message.
Au cours de cette première sous-étape, l’outil d’identification 84 de chaque moteur actif 70, 72, 74 découpe tout d’abord le message acquis en syntagmes ; dans l’exemple représenté, le message acquis est ainsi découpé en deux syntagmes : un syntagme verbal, « montre », et un syntagme nominal, « les détails ».During this first sub-step, the identification tool 84 of each active engine 70, 72, 74 first cuts the acquired message into syntagms; in the example shown, the acquired message is thus divided into two phrases: a verbal phrase, "watch", and a nominal phrase, "the details".
Ensuite, l’outil d’identification 84 calcule une proximité paradigmatique entre chaque syntagme et des paradigmes de référence stockés dans la bibliothèque de paradigmes et appartenant à une catégorie correspondant au type de syntagme reconnu. Dans l’exemple représenté, l’outil d’identification 84 de chaque moteur 70, 72, 74 calcule ainsi la proximité paradigmatique entre « montre » et différents paradigmes de référence appartenant à une catégorie liée aux actions susceptibles d’être réalisées par l’application à laquelle est associé le moteur 70, 72, 74. Ces paradigmes de référence comprennent typiquement : « afficher » et « sélectionner » pour le moteur 70, « afficher », « sélectionner », « zoomer » et « modifier » pour le moteur 72, et « afficher », « sélectionner » et « zoomer » pour le moteur 74, et le calcul de proximité paradigmatique donne, pour chacun des moteurs 70, 72, 74, une proximité plus forte avec le paradigme de référence « afficher ». Puis l’outil d’identification 84 de chaque moteur 70, 72, 74 calcule la proximité paradigmatique entre « les détails » et différents paradigmes de référence appartenant à une catégorie liée aux objets susceptibles d’être affichés par l’application à laquelle est associé le moteur 70, 72, 74. Ces paradigmes de référence comprennent typiquement : « détail » et «configuration » pour le moteur 70, « détail », « point de passage » et « carte » pour le moteur 72, et « détail » et « piste » pour le moteur 74, et le calcul de proximité paradigmatique donne, pour chacun des moteurs 70, 72, 74, une proximité plus forte avec le paradigme de référence « détail ».Next, the identification tool 84 calculates a paradigmatic proximity between each syntagm and reference paradigms stored in the paradigm library and belonging to a category corresponding to the type of syntagm recognized. In the example shown, the identification tool 84 of each motor 70, 72, 74 thus calculates the paradigmatic proximity between “watch” and different reference paradigms belonging to a category linked to the actions likely to be carried out by the application to which the motor 70, 72, 74 is associated. These reference paradigms typically include: "display" and "select" for the motor 70, "display", "select", "zoom" and "modify" for the motor 72, and "display", "select" and "zoom" for the motor 74, and the paradigmatic proximity calculation gives, for each of the motors 70, 72, 74, a closer proximity with the reference paradigm "display". Then the identification tool 84 of each engine 70, 72, 74 calculates the paradigmatic proximity between “the details” and different reference paradigms belonging to a category linked to the objects likely to be displayed by the application with which it is associated. the engine 70, 72, 74. These reference paradigms typically include: "detail" and "configuration" for the engine 70, "detail", "waypoint" and "map" for the engine 72, and "detail" and "Track" for the motor 74, and the paradigmatic proximity calculation gives, for each of the motors 70, 72, 74, a closer proximity with the reference paradigm "detail".
Enfin, l’outil d’identification 84 désigne comme premiers paramètres de message identifiés les paramètres de message auxquels sont associés les paradigmes de référence reconnus comme les plus proches des syntagmes de la phrase. Dans l’exempleFinally, the identification tool 84 designates as first identified message parameters the message parameters with which the reference paradigms recognized as closest to the phrase syntagms are associated. In the example
1θ représenté, l’outil d’identification 84 du moteur 70 désigne ainsi comme paramètres de message identifiés les paramètres « affichage » et « détails des synoptiques », l’outil d’identification 84 du moteur 72 désigne comme paramètres de message identifiés les paramètres « affichage » et « détails des points de passage », et l’outil d’identification 84 du moteur 74 désigne comme paramètres de message identifiés les paramètres « affichage » et « détails de l’environnement stratégique ».1θ shown, the identification tool 84 of the motor 70 thus designates as identified message parameters the parameters "display" and "block diagram details", the identification tool 84 of motor 72 designates as identified message parameters the parameters “Display” and “details of waypoints”, and the identification tool 84 of the engine 74 designates as identified message parameters the parameters “display” and “details of the strategic environment”.
A la suite de la sous-étape 130, l’outil d’identification 84 détermine au cours d’une sous-étape 132 si les premiers paramètres de message ainsi identifiés sont suffisants pour construire un message candidat. Si la réponse est positive, l’étape 128 s’achève. Si la réponse est négative, la sous-étape 132 est suivie d’une sous-étape 134 de repérage de la catégorie d’au moins un paramètre de message manquant, ce paramètre de message manquant ne pouvant pas être déduit du seul message acquis. Cette sousétape 134 est elle-même suivie d’une sous-étape 136 d’identification de deuxièmes paramètres de message.Following sub-step 130, the identification tool 84 determines in sub-step 132 whether the first message parameters thus identified are sufficient to construct a candidate message. If the answer is positive, step 128 is completed. If the answer is negative, sub-step 132 is followed by a sub-step 134 of locating the category of at least one missing message parameter, this missing message parameter cannot be deduced from the only message acquired. This sub-step 134 is itself followed by a sub-step 136 for identifying second message parameters.
Dans l’exemple représenté, les paramètres « affichage » et « détails du synoptique » suffisent au moteur 70 pour construire un message candidat ; pour le moteur 70, l’étape 128 s’achève donc à la sous-étape 132. Pour les moteurs 72 et 74 en revanche, il est nécessaire de compléter le message candidat avec un paramètre permettant de déterminer l’objet dont les détails doivent être affichés. Pour ces moteurs 72, 74, la sous-étape 132 est donc suivie de la sous-étape 134, au cours de laquelle l’outil d’identification 84 du moteur 72 repère qu’il manque un paramètre de message appartenant à une catégorie « référence des points de passage », et l’outil d’identification 84 du moteur 74 repère qu’il manque un paramètre de message appartenant à une catégorie « référence des pistes radar ».In the example shown, the parameters "display" and "details of the diagram" are sufficient for the engine 70 to construct a candidate message; for engine 70, step 128 therefore ends in sub-step 132. For engines 72 and 74 on the other hand, it is necessary to complete the candidate message with a parameter making it possible to determine the object whose details must be displayed. For these engines 72, 74, the sub-step 132 is therefore followed by the sub-step 134, during which the identification tool 84 of the engine 72 identifies that a message parameter belonging to a category "is missing" waypoint reference ”, and the identification tool 84 of the engine 74 spots that a message parameter belonging to a“ radar track reference ”category is missing.
Au cours de la sous-étape 136, les moteurs concernés identifient chacun, au sein de la catégorie de paramètre du ou de chaque paramètre de message manquant, au moins un deuxième paramètre de message, de sorte que les premier et deuxième paramètres de message soient, en combinaison l’une avec l’autre, suffisants pour la construction d’un message candidate. Cette identification est réalisée en fonction d’au moins une information contextuelle primaire identifiée par le déterminateur de contexte 34 au cours d’une étape 138, cette information contextuelle primaire pouvant être différente pour chacun des moteurs concernés. Dans l’exemple représenté, les moteurs concernés sont les moteurs 72 et 74. Le moteur 72 utilise typiquement comme information contextuelle primaire la direction du regard de l’utilisateur et choisit comme paramètre de message la référence du point de passage vers lequel le regard de l’utilisateur pointe. Le moteur 74 utilise quant à lui comme information contextuelle primaire l'historique 44 des opérations réalisées par le système d’assistance 10, et sélectionne comme paramètre de message la référence de la dernière piste radar sélectionnée par l’utilisateur.During sub-step 136, the engines concerned each identify, within the parameter category of the or each missing message parameter, at least one second message parameter, so that the first and second message parameters are , in combination with each other, sufficient for the construction of a candidate message. This identification is carried out as a function of at least one primary contextual information identified by the context determiner 34 during a step 138, this primary contextual information being able to be different for each of the engines concerned. In the example shown, the motors concerned are motors 72 and 74. Motor 72 typically uses the direction of the user's gaze as primary contextual information and chooses as a message parameter the reference of the passage point towards which the gaze of the user points. The engine 74 uses as its primary contextual information the history 44 of the operations carried out by the assistance system 10, and selects as a message parameter the reference of the last radar track selected by the user.
A la suite de la sous-étape 136, l’étape 128 s’achève.Following sub-step 136, step 128 is completed.
L’étape 128 est suivie d’une étape 140 au cours de laquelle l’outil de construction de message 86 de chaque moteur 70, 72, 74 tente de construire un message candidat à partir des paramètres de message identifiés par l’outil d’identification 84 du moteur 70, 72, 74. Dans l’exemple représenté, l’outil de construction de message 86 de chaque moteur 70, 72, 74 parvient à construire un tel message candidat ; les moteurs 70, 72, 74 constituent ainsi tous des moteurs candidats.Step 128 is followed by a step 140 during which the message construction tool 86 of each engine 70, 72, 74 attempts to construct a candidate message from the message parameters identified by the communication tool. identification 84 of the engine 70, 72, 74. In the example shown, the message construction tool 86 of each engine 70, 72, 74 manages to construct such a candidate message; the motors 70, 72, 74 thus all constitute candidate motors.
Puis, à la suite de l’étape 140, l’outil de construction de message 86 calcule au cours d’une étape 142 le score de pertinence du message candidat.Then, following step 140, the message construction tool 86 calculates in step 142 the relevance score of the candidate message.
L’étape 126 de traduction du message originel en messages candidats est suivie d’une étape 144 de sélection de l’un des moteurs candidats 70, 72, 74. Cette sélection est réalisée en fonction d’au moins une information contextuelle secondaire déterminée par le déterminateur de contexte 34 au cours d’une étape 146. L’étape 144 comprend les sousétapes suivantes :Step 126 of translating the original message into candidate messages is followed by a step 144 of selecting one of the candidate engines 70, 72, 74. This selection is carried out as a function of at least one secondary contextual information determined by the context determiner 34 during a step 146. Step 144 comprises the following sub-steps:
attribution, en fonction de la ou chaque information contextuelle secondaire, d’un numéro d’ordre à chaque moteur actif, et donc à chaque moteur candidat 70, 72, 74, et sélection du ou des moteur(s) candidat(s) ayant le numéro d’ordre le plus élevé.allocation, depending on the or each secondary contextual information, of a serial number to each active engine, and therefore to each candidate engine 70, 72, 74, and selection of the candidate engine (s) having the highest order number.
L’attribution d’un numéro d’ordre à chaque moteur de transcription actif 70, 72, 74 est effectuée selon la probabilité que l’utilisateur, compte-tenu du contexte, émette un message susceptible d’être interprété par ledit moteur 70, 72, 74.The assignment of a serial number to each active transcription engine 70, 72, 74 is carried out according to the probability that the user, taking into account the context, emits a message capable of being interpreted by said engine 70, 72, 74.
Dans l’exemple représenté, les informations contextuelles secondaires utilisées pour effectuer une sélection parmi les moteurs candidats 70, 72, 74 comprennent typiquement la direction du regard de l’utilisateur, l’historique 44 des opérations réalisées par le système d’assistance 10, et l’état système de l’aéronef. Comme indiqué plus haut, le regard de l’utilisateur pointe vers un point de passage de l’aéronef, et l'historique 44 indique la référence de la dernière piste radar sélectionnée par l’utilisateur. L’historique 44 indique cependant également que les dernières actions de l’utilisateur concernant les synoptiques et l’environnement stratégique de l’aéronef sont anciennes, et que les dernières actions de l’utilisateur concernaient la gestion des points de passage. L’état système de l’aéronef indique quant à lui que l’aéronef est opérationnel et qu’il n’y a aucun problème sur ses systèmes. Compte-tenu de ces éléments, le numéro d’ordre le plus élevé est attribué au moteur 72, le moteur 74 reçoit un numéro d’ordre intermédiaire, et le moteur 70 reçoit le numéro d’ordre le plus faible. En conséquence, le moteur sélectionné est le moteur 72.In the example shown, the secondary contextual information used to make a selection from among the candidate engines 70, 72, 74 typically includes the direction of the gaze of the user, the history 44 of the operations performed by the assistance system 10, and the system state of the aircraft. As indicated above, the user's gaze points to a waypoint of the aircraft, and the history 44 indicates the reference of the last radar track selected by the user. History 44 also indicates, however, that the last actions of the user concerning the screens and the strategic environment of the aircraft are old, and that the last actions of the user concerned the management of the waypoints. The system status of the aircraft indicates that the aircraft is operational and that there are no problems with its systems. Given these elements, the highest order number is assigned to the engine 72, the engine 74 receives an intermediate order number, and the engine 70 receives the lowest order number. Consequently, the selected motor is motor 72.
L’étape de transcription 125 comprend enfin une dernière sous-étape 148 de détermination du message effectif correspondant au message originel.The transcription step 125 finally comprises a last sub-step 148 of determining the effective message corresponding to the original message.
Lors de cette sous-étape 148, le message candidat produit par le moteur de transcription sélectionné 72 ou, dans le cas où plusieurs moteurs de transcription sont sélectionnés, le message candidat qui, parmi les messages candidats produits par les moteurs de transcription sélectionnés, présente le plus grand score de pertinence, est défini comme constituant le message effectif correspondant au message originel.During this substep 148, the candidate message produced by the selected transcription engine 72 or, in the case where several transcription engines are selected, the candidate message which, among the candidate messages produced by the selected transcription engines, has the highest relevance score, is defined as constituting the effective message corresponding to the original message.
Dans l’exemple représenté, c’est donc le message candidat produit par le moteur 72, à savoir le message consistant à afficher les détails du point de passage KCVG, qui est ainsi défini comme constituant le message effectif correspondant au message originel.In the example shown, this is therefore the candidate message produced by the engine 72, namely the message consisting in displaying the details of the waypoint KCVG, which is thus defined as constituting the effective message corresponding to the original message.
On notera toutefois que, dans un contexte différent, un autre message candidat aurait pu être défini comme constituant le message effectif. Par exemple, dans le cas où l’état système de l’aéronef aurait détecté un dysfonctionnement récent de l’un des systèmes de l’aéronef, l’historique 44 indiquant que l’utilisateur venait d’être informé de ce dysfonctionnement, c'est alors le moteur 70 qui aurait reçu le numéro d’ordre le plus élevé, et c’est donc lui qui aurait été sélectionné à l’étape 144, et non le moteur 72 ; en conséquence, le message effectif aurait été constitué par le message produit par le moteur 70, à savoir une commande consistant à afficher les détails des synoptiques.Note, however, that, in a different context, another candidate message could have been defined as constituting the effective message. For example, in the case where the system state of the aircraft has detected a recent malfunction of one of the systems of the aircraft, the history 44 indicating that the user had just been informed of this malfunction, c 'is then the motor 70 which would have received the highest order number, and it is therefore he who would have been selected in step 144, and not the motor 72; consequently, the actual message would have been constituted by the message produced by the engine 70, namely a command consisting in displaying the details of the screens.
Optionnellement, l’étape de transcription 125 comprend également une étape 149 de vérification du message effectif. De préférence, cette étape n’est active que dans les cas où le numéro d’ordre attribué au moteur de transcription sélectionné n’est pas le numéro d’ordre le plus élevé, ce qui peut être le cas lorsque le moteur actif qui a reçu le numéro d’ordre le plus élevé n’est pas en mesure de produire un message candidat correspondant au message originel. Dans ce cas, le module transcripteur 36 demande à l’utilisateur, au cours d’une étape 149, de confirmer que son message originel correspond bien au message candidat du moteur de transcription sélectionné. Si cette correspondance est confirmée, le message candidat du moteur de transcription sélectionné est défini à l’étape 148 comme constituant le message effectif correspondant au message originel.Optionally, the transcription step 125 also includes a step 149 of verifying the effective message. Preferably, this step is only active in cases where the sequence number assigned to the selected transcription engine is not the highest sequence number, which may be the case when the active engine which has received the highest order number is unable to produce a candidate message corresponding to the original message. In this case, the transcriptionist module 36 requests the user, during a step 149, to confirm that their original message corresponds to the candidate message of the selected transcription engine. If this correspondence is confirmed, the candidate message of the selected transcription engine is defined in step 148 as constituting the effective message corresponding to the original message.
On voit ainsi que l’invention permet de corriger les éventuelles erreurs dans la détermination du contexte.We can see that the invention makes it possible to correct any errors in determining the context.
Une fois le message originel interprété en message effectif au cours de l’étape 120, ce message effectif est transmis à l’unité de traitement 20, qui le traite au cours d’une étape 150. Dans l’exemple représenté, l’affichage du dispositif 22 est ainsi actualisé pour afficher, à la place de la fenêtre 14A des synoptiques, les détails du point de passage KCVG (voir Figure 4).Once the original message has been interpreted as an effective message during step 120, this effective message is transmitted to the processing unit 20, which processes it during a step 150. In the example shown, the display of the device 22 is thus updated to display, in place of the window 14A of the block diagrams, the details of the crossing point KCVG (see FIG. 4).
Selon un autre exemple de mise en œuvre du procédé 100, l’utilisateur pose une question « que dois-je faire ? » alors qu’il est en phase de réveil. Une information sur la condition physiologique de l’utilisateur est communiquée par le capteur d’état physiologique, psychologique et/ou cognitif 50, ce capteur 50 indiquant par exemple que le réveil de l’utilisateur remonte à moins de trente minutes. Un moteur de transcription en phase de réveil (non représenté) est alors actif, ainsi qu’un moteur de transcription en cas de surprise (non représenté). Le message candidat produit par le moteur de transcription en phase de réveil en réponse à la question de l’utilisateur consiste en une commande d’affichage d’un rappel des tâches prévues, et le message candidat produit par le moteur de transcription en cas de surprise consiste en une commande d’explicitation de la situation tactique. Aucun capteur ne détectant d’élément de surprise, le numéro d’ordre attribué au moteur de transcription en cas de surprise est plus faible que le numéro d’ordre attribué au moteur de transcription en phase de réveil. En conséquence, le message effectif qui est retenu par le module transcripteur 36 est constitué par le message candidat produit par le moteur de transcription en phase de réveil, et le dispositif d’affichage 22 affiche donc un rappel des tâches prévues.According to another example of implementation of method 100, the user asks a question "what should I do? "While he is awake. Information on the physiological condition of the user is communicated by the physiological, psychological and / or cognitive state sensor 50, this sensor 50 indicating for example that the waking of the user goes back less than thirty minutes. A waking up transcription engine (not shown) is then active, as well as a transcription engine in the event of a surprise (not shown). The candidate message produced by the transcription engine in the wake-up phase in response to the user's question consists of a command to display a reminder of the planned tasks, and the candidate message produced by the transcription engine in the event of surprise consists of a command to explain the tactical situation. Since no sensor detects any element of surprise, the sequence number assigned to the transcription engine in the event of a surprise is lower than the sequence number assigned to the transcription engine in the wake-up phase. Consequently, the effective message which is retained by the transcriptionist module 36 is constituted by the candidate message produced by the transcription engine in the wake-up phase, and the display device 22 therefore displays a reminder of the planned tasks.
Si, en revanche, la même question est posée par l’utilisateur alors qu’une information contextuelle traduisant un élément de surprise est déterminée par le déterminateur de contexte 34, un numéro d’ordre plus élevée sera attribué au moteur de transcription en cas de surprise, et le message effectif qui sera retenu sera constitué par le message candidat produit par le moteur de transcription en cas de surprise. En conséquence, le dispositif d’affichage 22 affichera des informations explicitant la situation tactique à l’utilisateur.If, on the other hand, the same question is asked by the user when contextual information translating an element of surprise is determined by the context determiner 34, a higher order number will be assigned to the transcription engine in the event of surprise, and the effective message which will be retained will be constituted by the candidate message produced by the transcription engine in the event of surprise. Consequently, the display device 22 will display information explaining the tactical situation to the user.
L’invention décrite ci-dessus peut ainsi être mise en œuvre de manière autonome par des appareils ayant une puissance de calcul limitée, puisque ne sont utilisés que des moteurs de transcription ne connaissant que de petits nombres de messages et donc ne nécessitant pas de puissance de calcul très importante.The invention described above can thus be implemented autonomously by devices with limited computing power, since only transcription engines are used which know only small numbers of messages and therefore do not require power very important calculation.
La juxtaposition de ces moteurs de transcription les uns aux autres permet néanmoins l’interprétation d’un grand nombre de messages exprimées à l’aide un vocabulaire étendu, et la prise en compte des informations contextuelles permet de faire la discrimination nécessaire entre les résultats retournés par ces différents moteurs de transcription. II est ainsi possible d’atteindre un taux d’interprétation proche des 100% sur un vocabulaire étendu.The juxtaposition of these transcription engines to each other nevertheless allows the interpretation of a large number of messages expressed using an extensive vocabulary, and the taking into account of the contextual information allows to make the necessary discrimination between the returned results. by these different transcription engines. It is thus possible to reach an interpretation rate close to 100% on an extended vocabulary.
En outre, l’invention permet d’abaisser le taux d’erreur en permettant la prise en compte de messages émis dans un mauvais contexte.In addition, the invention makes it possible to lower the error rate by allowing messages taken into account in the wrong context to be taken into account.
Enfin, les temps de latence sont très faibles puisque, grâce à l’architecture du module transcripteur 36, la détermination des messages candidats peut être effectuée de manière quasiment simultanée avec l’acquisition du message originel, et que l’étape finale, qui consiste en la sélection d’au moins un moteur de transcription pour la détermination du message effectif correspondant au message originel, nécessite très peu de calcul et est donc presque instantanée.Finally, the latency times are very low since, thanks to the architecture of the transcriptionist module 36, the determination of the candidate messages can be carried out almost simultaneously with the acquisition of the original message, and that the final step, which consists in selecting at least one transcription engine for determining the effective message corresponding to the original message, requires very little computation and is therefore almost instantaneous.
Claims (15)
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1700110A FR3062734B1 (en) | 2017-02-03 | 2017-02-03 | MESSAGE INTERPRETATION DEVICE WITH CONTEXT TAKING INTO ACCOUNT |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| FR1700110 | 2017-02-03 | ||
| FR1700110A FR3062734B1 (en) | 2017-02-03 | 2017-02-03 | MESSAGE INTERPRETATION DEVICE WITH CONTEXT TAKING INTO ACCOUNT |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| FR3062734A1 true FR3062734A1 (en) | 2018-08-10 |
| FR3062734B1 FR3062734B1 (en) | 2020-11-06 |
Family
ID=59253566
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| FR1700110A Active FR3062734B1 (en) | 2017-02-03 | 2017-02-03 | MESSAGE INTERPRETATION DEVICE WITH CONTEXT TAKING INTO ACCOUNT |
Country Status (1)
| Country | Link |
|---|---|
| FR (1) | FR3062734B1 (en) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007021587A2 (en) * | 2005-08-10 | 2007-02-22 | Voicebox Technologies, Inc, | Systems and methods of supporting adaptive misrecognition in conversational speech |
| WO2007027989A2 (en) * | 2005-08-31 | 2007-03-08 | Voicebox Technologies, Inc. | Dynamic speech sharpening |
| US20120265528A1 (en) * | 2009-06-05 | 2012-10-18 | Apple Inc. | Using Context Information To Facilitate Processing Of Commands In A Virtual Assistant |
| FR3034594A1 (en) * | 2015-03-31 | 2016-10-07 | Thales Sa | METHOD AND ELECTRONIC DEVICE FOR MANAGING MESSAGES EXCHANGED BETWEEN AN AIRCRAFT AND A GROUND STATION, COMPUTER PROGRAM PRODUCT |
-
2017
- 2017-02-03 FR FR1700110A patent/FR3062734B1/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007021587A2 (en) * | 2005-08-10 | 2007-02-22 | Voicebox Technologies, Inc, | Systems and methods of supporting adaptive misrecognition in conversational speech |
| WO2007027989A2 (en) * | 2005-08-31 | 2007-03-08 | Voicebox Technologies, Inc. | Dynamic speech sharpening |
| US20120265528A1 (en) * | 2009-06-05 | 2012-10-18 | Apple Inc. | Using Context Information To Facilitate Processing Of Commands In A Virtual Assistant |
| FR3034594A1 (en) * | 2015-03-31 | 2016-10-07 | Thales Sa | METHOD AND ELECTRONIC DEVICE FOR MANAGING MESSAGES EXCHANGED BETWEEN AN AIRCRAFT AND A GROUND STATION, COMPUTER PROGRAM PRODUCT |
Also Published As
| Publication number | Publication date |
|---|---|
| FR3062734B1 (en) | 2020-11-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10789953B2 (en) | Voice and connection platform | |
| US20210097502A1 (en) | Automatically determining and presenting personalized action items from an event | |
| US11948563B1 (en) | Conversation summarization during user-control task execution for assistant systems | |
| KR102625761B1 (en) | User-progammable automated assistant | |
| EP3583747B1 (en) | Intelligent digital assistant system | |
| US10679008B2 (en) | Knowledge base for analysis of text | |
| JP7032523B2 (en) | Graphical user interface rendering management with voice-driven computing infrastructure | |
| CA2942116C (en) | Automatic voice recognition with detection of at least one contextual element, application to steering and maintenance of an aircraft | |
| US11551676B2 (en) | Techniques for dialog processing using contextual data | |
| EP3506241A1 (en) | Electronic device for an interface between at least one avionics system and a set of sensors, associated avionics installation, communication method and computer program | |
| EP2296127A1 (en) | Method and device for managing information in an aircraft | |
| US10770072B2 (en) | Cognitive triggering of human interaction strategies to facilitate collaboration, productivity, and learning | |
| JP7471371B2 (en) | Selecting content to render on the assistant device's display | |
| CA3047249A1 (en) | Platform for training and/or assistance with air control through an electronic air traffic control system, associated process | |
| US10602974B1 (en) | Detection and management of memory impairment | |
| FR3062734A1 (en) | MESSAGE INTERPRETATION DEVICE WITH CONTEXT CONSIDERATION | |
| FR3096487A1 (en) | Method and device for automatic management on board an aircraft of air traffic control audio messages | |
| CA2432366C (en) | Process and device for developing an abridged form of any term used in a warning message to be displayed on an aircraft cockpit screen | |
| FR3114889A1 (en) | METHOD AND ELECTRONIC DEVICE FOR GENERATION OF A STRUCTURED BASE OF RELEVANT DATA FOR THE MANAGEMENT OF A MISSION, ASSOCIATED COMPUTER PROGRAM | |
| US11620993B2 (en) | Multimodal intent entity resolver | |
| FR3081599A1 (en) | IMPROVEMENT OF VOICE RECOGNITION VOICE RECEIVING DEVICES | |
| US20230353652A1 (en) | Presenting Personalized Content during Idle Time for Assistant Systems | |
| EP4343493A1 (en) | Presenting attention states associated with voice commands for assistant systems | |
| WO2023117200A1 (en) | Method for processing data of an aircraft piloting assistance device | |
| FR3100367A1 (en) | IT agent with advanced response to a user message |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PLFP | Fee payment |
Year of fee payment: 2 |
|
| PLSC | Publication of the preliminary search report |
Effective date: 20180810 |
|
| PLFP | Fee payment |
Year of fee payment: 4 |
|
| PLFP | Fee payment |
Year of fee payment: 5 |
|
| PLFP | Fee payment |
Year of fee payment: 6 |
|
| PLFP | Fee payment |
Year of fee payment: 7 |
|
| PLFP | Fee payment |
Year of fee payment: 8 |