FR2981445A1 - METHOD FOR MANAGING A NAVIGATION SYSTEM AND NAVIGATION SYSTEM FOR ITS IMPLEMENTATION - Google Patents

METHOD FOR MANAGING A NAVIGATION SYSTEM AND NAVIGATION SYSTEM FOR ITS IMPLEMENTATION Download PDF

Info

Publication number
FR2981445A1
FR2981445A1 FR1259860A FR1259860A FR2981445A1 FR 2981445 A1 FR2981445 A1 FR 2981445A1 FR 1259860 A FR1259860 A FR 1259860A FR 1259860 A FR1259860 A FR 1259860A FR 2981445 A1 FR2981445 A1 FR 2981445A1
Authority
FR
France
Prior art keywords
information
display means
navigation system
driver
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
FR1259860A
Other languages
French (fr)
Other versions
FR2981445B1 (en
Inventor
Arne Friedrichs
Werner Toedter
Dirk Strauss
Peter Kaiser
Christian Neumann
Dennis Allerkamp
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Robert Bosch GmbH
Original Assignee
Robert Bosch GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Robert Bosch GmbH filed Critical Robert Bosch GmbH
Publication of FR2981445A1 publication Critical patent/FR2981445A1/en
Application granted granted Critical
Publication of FR2981445B1 publication Critical patent/FR2981445B1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3602Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3641Personalized guidance, e.g. limited guidance on previously travelled routes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3655Timing of guidance instructions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/21Optical features of instruments using cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Ophthalmology & Optometry (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • Instructional Devices (AREA)

Abstract

Procédé de gestion d'un système de navigation (10) de véhicule comportant un moyen d'affichage (11) pour les informations (15) destinées au conducteur (12), une caméra (13) pour déterminer la direction du regard (14) du conducteur (12) et au moins une partie des informations (15) affichées par le moyen d'affichage (11) est affichée en fonction de la direction du regard (14).A method of managing a vehicle navigation system (10) having display means (11) for information (15) for the driver (12), a camera (13) for determining the direction of view (14) of the conductor (12) and at least a part of the information (15) displayed by the display means (11) is displayed according to the direction of the gaze (14).

Description

Domaine de l'invention La présente invention se rapporte à un procédé de gestion d'un système de navigation équipant un véhicule ainsi qu'un système de navigation comportant des moyens d'affichage d'informations à des- tination du conducteur du véhicule, une caméra déterminant la direc- tion du regard des yeux du conducteur. Etat de la technique Le document DE 10 2004 005 816 A 1 décrit un véhicule automobile dans lequel est installée une caméra pour déterminer la di- rection du regard des yeux du conducteur. Pour déterminer la direction du regard, on peut prévoir des surfaces de symbole et si le conducteur regarde par exemple une surface de symbole ainsi définie qui reproduit une certaine fonction graphique où dans laquelle est contenue une fonction déterminée, cette fonction pourra être reconnue comme sélec- ts tionnée par le conducteur. Par exemple, la surface de symbole ou sur- face de navigation peut représenter un système de navigation et si le conducteur regarde le système de navigation, le système sera par exemple activé. Spécialement il sera indiqué qu'au moins une surface symbolique est réalisée comme symbole fixe invariable avec une fonc- 20 tion associée de manière fixe et au moins une autre surface de symbole sera un symbole variable avec chaque fois au moins une fonction variable associée. Ainsi, selon un concept de sélection de la direction du regard et du déclenchement consécutif de la fonction, on combine deux directions de regard du conducteur qui seront exploitées pour recon- 25 naître et confirmer la sélection faite par le conducteur. Le document DE 43 28 277 C2 donne une description détaillée des possibilités techniques de saisie de la direction de regard. Selon ce document, pour un grand nombre de modes de fonctionnement pour la détection d'image, on pourra saisir la direction de regard 30 de l'utilisateur par une installation de détection de l'axe de visée. La dé- tection de l'axe de visée ou axe du regard d'un utilisateur sera utilisée par une caméra, par exemple pour commander ses modes de fonctionnement. On pourra par exemple commander les conditions d'éclairage ou autres fonctions de la caméra par l'installation de détecteurs équipée 35 d'une installation d'axe de visée. Field of the Invention The present invention relates to a method of managing a navigation system equipping a vehicle as well as a navigation system comprising means for displaying information to the driver of the vehicle, an camera determining the direction of the eyes of the driver's eyes. STATE OF THE ART Document DE 10 2004 005 816 A1 describes a motor vehicle in which a camera is installed to determine the direction of the eyes of the driver's eyes. To determine the direction of the gaze, symbol surfaces can be provided and if the driver looks, for example, at a symbol surface thus defined which reproduces a certain graphical function in which a given function is contained, this function can be recognized as selecting by the driver. For example, the symbol surface or navigation surface may represent a navigation system and if the driver looks at the navigation system, the system will be activated for example. Especially it will be indicated that at least one symbolic surface is embodied as an invariable fixed symbol with a fixedly associated function and at least one other symbol surface will be a variable symbol with each time at least one associated variable function. Thus, according to a concept of selecting the direction of gaze and the subsequent triggering of the function, two directions of the driver's gaze are combined which will be used to recognize and confirm the selection made by the driver. DE 43 28 277 C2 gives a detailed description of the technical possibilities of entering the direction of gaze. According to this document, for a large number of operating modes for image detection, it will be possible to enter the viewing direction 30 of the user by a detection installation of the line of sight. The detection of the axis of view or axis of the gaze of a user will be used by a camera, for example to control its modes of operation. For example, it will be possible to control the lighting conditions or other functions of the camera by the installation of detectors equipped with a sighting axis installation.

Ainsi, il est fondamentalement connu de reconnaître au moins un souhait d'activation émis par un utilisateur pour activer une installation technique, par exemple le système de navigation d'un véhicule par le conducteur en se fondant sur la saisie de la direction du re- gard du conducteur à l'aide d'un moyen technique approprié. But de l'invention Partant de ces bases des possibilités techniques, la pré- sente invention a pour but de perfectionner le procédé de gestion d'un système de navigation de véhicule. Thus, it is basically known to recognize at least one activation wish issued by a user to activate a technical installation, for example the navigation system of a vehicle by the driver on the basis of the capture of the direction of the vehicle. the driver using an appropriate technical means. OBJECT OF THE INVENTION From these bases of the technical possibilities, the present invention aims to improve the management method of a vehicle navigation system.

Exposé et avantages de l'invention A cet effet, l'invention a pour objet un procédé de gestion d'un système de navigation de véhicule comportant un moyen d'affichage pour afficher les informations destinées au conducteur, une caméra pour déterminer la direction de visée de rceil du conducteur et au moins une partie des informations affichées par le moyen d'affichage sont affichées en fonction de la direction de regard. Ainsi, l'invention applique l'enseignement technique selon lequel pour gérer un système de navigation, on détermine la direction de visée ou direction de regard du conducteur à l'aide d'une caméra et une partie des informations affichées par un moyen d'affichage du sys- tème de navigation sera affichée en fonction de la direction de visée ou de regard du conducteur. Selon l'invention, la direction de visée du conducteur, saisie par la caméra, sélectionne non seulement le fonctionnement du système de navigation en tant que tel, mais le procédé de l'invention permet de faire dépendre le contenu de ce qui est affiché par le moyen d'affichage du système de navigation en fonction de la direction de visée des yeux du conducteur, saisie par la caméra. Le procédé selon l'invention repose ainsi sur l'idée que l'intérêt du conducteur concerne une certaine information par la saisie de la direction de visée ou de la direc- tion de regard du conducteur. Si le conducteur d'un véhicule ne regarde pas le moyen d'affichage du système de navigation, par exemple l'afficheur intégré dans le tableau de bord du véhicule, on peut supposer que le conducteur n'est pas intéressé par l'information que pourrait fournir le système de navigation. En particulier, à ce moment le conduc- teur n'a pas d'intérêt à obtenir une information spéciale de navigation. Mais si le conducteur regarde l'affichage, cela signifie que le conducteur est intéressé par l'information actuelle de navigation. Le procédé selon l'invention est sélectionné en fonction du résultat du contenu d'affi- chage du moyen d'affichage du système de navigation qui dépend des besoins du conducteur et notamment de son souhait d'obtenir une certaine information. De façon particulièrement avantageuse, les informations sur le moyen d'affichage du système de navigation sont des informa- tions de navigation qui seront affichées en fonction de la direction du regard du conducteur même brièvement dirigé sur le moyen d'affichage du système de navigation et/ ou qui était dirigé sur celui-ci. En particulier, ce n'est que si le conducteur ou par exemple également le passager ou d'autres personnes, dirigent le regard sur le moyen d'affichage du système de navigation, que l'on pourra en déduire l'intérêt qu'il y a à lire une certaine information sur le moyen d'affichage du système de navigation. Le système de navigation peut comporter une émission acoustique d'émission vocale, par exemple par l'installation de haut- parleurs du véhicule et les émissions vocales peuvent être par exemple des informations de navigation. D'une manière particulièrement avantageuse, le procédé selon l'invention de détermination de la direction du regard du conducteur dépend de la fonction de l'émission vocale faite par le système de navigation. On peut par exemple rencontrer des situations dans les- quelles le conducteur n'aura pas compris l'émission vocale. Il est connu pour cela d'utiliser des touches équipant le véhicule ou le système de navigation pour répéter la dernière émission vocale, par exemple une indication de direction. Si le conducteur regarde le moyen d'affichage du système de navigation peu après l'émission vocale, on peut supposer que le conducteur souhaite que soit répétée l'émission vocale avec l'information de navigation. La détermination de la direction du regard du conducteur doit dans ces conditions ne pas toujours se faire de manière permanente et cette détermination peut être seulement activée si l'émis- sion vocale est faite à destination du conducteur pour vérifier si le con- ducteur regarde ou non le moyen d'affichage du système de navigation. Si le conducteur ne regarde pas le moyen d'affichage du système de navigation, on peut supposer que l'émission vocale a été comprise. Mais si le conducteur regarde le moyen d'affichage peu après l'émission vocale, on pourra afficher l'émission vocale sous la forme d'un texte et/ou d'un graphique pour le conducteur et répéter ainsi cette émission. Selon un développement, on applique une surveillance de temps par le procédé de l'invention. L'affichage de l'information par le moyen d'affichage se fera alors si le conducteur dirige les yeux sur le moyen d'affichage dans un intervalle de temps déterminé par la surveil- lance du temps après l'émission de l'information vocale. La surveillance du temps peut toutefois également consister à commencer l'intervalle de temps à l'instant de l'émission vocale pour que le conducteur puisse lire l'information sur le moyen d'affichage du système de navigation en même temps que l'émission vocale. Mais en principe, il est possible, également, indépendamment de l'intervalle de temps prédéfini, de répéter l'information vocale émise par les haut-parleurs du véhicule et aussi sous la forme d'un texte ou d'un graphique sur le moyen d'affichage du système de navigation si le conducteur dirige son regard sur le moyen d'affichage. L'information vocale du système d'informations peut ainsi être répétée avec l'information affichée sur le moyen d'affichage ou encore être présentée sous la forme d'un texte ou d'un graphique affiché comme information correspondante ou en complément des informations vocales émises de manière acoustique à destination du conducteur. Par exemple, les informations vocales peuvent être répétées par des flèches, des indications de déviation, des tracés routiers mis en évidence sur la carte routière ou des moyens analogues dans le moyen d'affichage. Si une carte routière est présentée sur le moyen d'affi- chage, celle-ci peut constituer au moins une partie des informations présentées par le moyen d'affichage et la carte routière sera alors affichée sur le moyen d'affichage si l'on constate que le conducteur dirige son regard sur le moyen d'affichage. Les informations qui ont été affichées en fonction de la direction du regard du conducteur sur le moyen d'affichage peuvent être celles d'un écran divisé avec la carte routière en texte ou en graphique sur le moyen d'affichage. On peut également envisager d'afficher les informations en fonction de la direction du regard du conducteur et de les superposer brièvement à la carte routière jusqu'à ce qu'elles aient état lues par le conducteur. Par exemple, l'écran divisé ou l'affichage superposé des informations, pourront être de nou- veau coupés lorsque le conducteur détourne son regard du moyen d'affichage du système de navigation. L'invention a également pour objet un système de naviga- tion de véhicule comportant un moyen d'affichage pour afficher les in- formations à destination du conducteur, * une caméra déterminant au moins la direction du regard du conducteur, et * une unité de commande coopérant avec la caméra et le moyen d'affichage pour qu'au moins une partie des informations affichées par le moyen d'affichage soit présentée en fonction de la direction du re- gard. Selon un développement avantageux du système de navi- gation, le moyen d'affichage présente une carte routière qui forme au moins une partie des informations affichées par le moyen d'affichage, * la nature de l'affichage de la carte routière, notamment le coefficient zoom de l'affichage de la carte routière étant réglé en fonction de la direction du regard. Par exemple, le coefficient de zoom de la carte routière pourra être augmenté si le conducteur dirige son regard sur le moyen d'affichage du système de navigation. La présente invention a également pour objet un programme d'ordinateur avec des moyens de code de programme pour exécuter toutes les étapes du procédé tel que décrit ci-dessus, notamment lorsque le programme d'ordinateur est appliqué par un ordinateur ou un système de navigation. L'invention a également pour objet un produit programme d'ordinateur avec des moyens de code de programme enregistrés par exemple sur un support de données lisible par un ordinateur pour exécuter toutes les étapes du procédé telles que décrites ci-dessus lorsque le programme d'ordinateur est appliqué par un ordinateur ou un système de navigation. Dessins La présente invention sera décrite ci-après de manière plus détaillée à l'aide d'un procédé de gestion d'un système de naviga- tion et d'un système de navigation mettant en oeuvre un tel procédé, représentés à titre d'exemple dans les dessins annexés dans lesquels : - la figure 1 est un ordinogramme d'un exemple de procédé de gestion d'un système de navigation selon l'invention, - la figure 2 est une représentation schématique du système de navi- gation et du conducteur dirigeant son regard sur le moyen d'affichage du système de navigation. Description d'un mode de réalisation de l'invention La figure 1 montre schématiquement un procédé de ges- tion d'un système de navigation appliquant les étapes du procédé de l'invention. Tout d'abord, on lance le procédé en activant (départ) 20 le système de navigation. Puis, dans une première étape, on vérifie si l'émission vocale 21 se fait ou non. Si l'émission vocale ne s'est produite (réponse N), le procédé revient au départ 20. S'il y a eu émission vocale 21 (J), on surveille le temps 22 consistant à démarrer par exemple un intervalle de temps dans lequel l'émission vocale 21 a été démarrée ou terminée. A l'intérieur de la surveillance de temps 22, on détermine la direction de regard 23 par une caméra qui détermine la direction du regard du conducteur. L'étape de détermination de la direction de re- gard 23 indique ainsi si le conducteur regarde le moyen d'affichage (J) ou s'il ne le regarde pas (N). Si le conducteur ne regarde pas le moyen d'affichage (N) le procédé revient au départ 20 du système de navigation. Si le moyen de détermination de la direction du regard 23 reconnaît que le conducteur dirige son regard sur le moyen d'affichage (J), on passe à l'étape de procédé 24 par laquelle on reconnaît le déroulement du temps surveillé. A la fin du temps (J), le procédé retourne au départ 20 du système de navigation. Si toutefois l'intervalle de temps n'est pas terminé, la fonction d'assistance 25 est lancée et affiche l'in- formation sur le moyen d'affichage du système de navigation, par exemple la répétition en texte ou la répétition graphique de l'émission vocale 21 qui a été transmise par voie acoustique au conducteur. Si l'information correspondante est affichée sur le moyen d'affichage du système de navigation, celui-ci peut par exemple tenir un certain temps et ensuite après l'affichage de l'information sur le moyen d'affichage du système de navigation, le procédé retourne au départ 20 du système de navigation. La figure 2 montre le système de navigation 10 selon l'in- vention avec le moyen d'affichage 11 qui présente les informations 15. DESCRIPTION AND ADVANTAGES OF THE INVENTION For this purpose, the subject of the invention is a method for managing a vehicle navigation system comprising a display means for displaying the information intended for the driver, a camera for determining the direction of travel. The aim of the driver and at least a portion of the information displayed by the display means is displayed according to the viewing direction. Thus, the invention applies the technical teaching according to which, in order to manage a navigation system, the direction of aim or direction of gaze of the driver is determined by means of a camera and part of the information displayed by means of a camera. The navigation system display will be displayed according to the direction of view or gaze of the driver. According to the invention, the direction of view of the driver, captured by the camera, not only selects the operation of the navigation system as such, but the method of the invention makes it possible to make the content of what is displayed depend on the display means of the navigation system according to the direction of sight of the driver's eyes, captured by the camera. The method according to the invention is thus based on the idea that the driver's interest relates to a certain piece of information by capturing the aiming direction or the driver's direction of view. If the driver of a vehicle does not look at the display means of the navigation system, for example the display integrated in the dashboard of the vehicle, it can be assumed that the driver is not interested in the information that could provide the navigation system. In particular, at this moment the driver has no interest in obtaining special navigation information. But if the driver looks at the display, it means that the driver is interested in the current navigation information. The method according to the invention is selected as a function of the result of the display content of the display means of the navigation system which depends on the needs of the driver and in particular his desire to obtain some information. Particularly advantageously, the information on the display means of the navigation system is navigation information which will be displayed according to the direction of the view of the driver even briefly directed on the display means of the navigation system and / or who was directed on it. In particular, it is only if the driver or for example also the passenger or other persons, direct the look on the display means of the navigation system, that we can deduce the interest that it There is some information on the means of display of the navigation system. The navigation system may comprise an acoustic emission of voice transmission, for example by the installation of loudspeakers of the vehicle and the voice transmissions may be for example navigation information. In a particularly advantageous manner, the method according to the invention for determining the direction of the driver's gaze depends on the function of the voice emission made by the navigation system. For example, there may be situations in which the driver has not understood the voice transmission. It is known for this purpose to use keys fitted to the vehicle or the navigation system to repeat the last voice transmission, for example a direction indication. If the driver is looking at the display means of the navigation system shortly after the voice broadcast, it can be assumed that the driver wishes the voice broadcast to be repeated with the navigation information. In such circumstances, the determination of the direction of the driver's gaze must not always be permanent and this determination may only be activated if the voice broadcast is made to the driver to check whether the driver is not the display means of the navigation system. If the driver does not look at the display means of the navigation system, it can be assumed that the voice broadcast has been understood. But if the driver looks at the display means soon after the voice broadcast, we can display the voice broadcast in the form of a text and / or a graph for the driver and repeat the broadcast. According to a development, time monitoring is applied by the method of the invention. The display of the information by the display means will then be done if the driver directs his eyes on the display means in a time interval determined by the monitoring of the time after the transmission of the voice information. . However, the time monitoring may also consist of starting the time interval at the moment of the voice emission so that the driver can read the information on the display means of the navigation system at the same time as the transmission. voice. But in principle, it is possible, also, regardless of the predefined time interval, to repeat the voice information transmitted by the speakers of the vehicle and also in the form of a text or a graphic on the medium display of the navigation system if the driver directs his gaze on the display means. The voice information of the information system may thus be repeated with the information displayed on the display means or may be presented in the form of a text or graphic displayed as corresponding information or in addition to the voice information. acoustically transmitted to the driver. For example, the voice information may be repeated by arrows, deviation indications, road traces highlighted on the road map or similar means in the display means. If a road map is presented on the display means, this may constitute at least a part of the information presented by the display means and the road map will then be displayed on the display means if note that the driver directs his gaze on the display means. The information that has been displayed according to the direction of the driver's gaze on the display means may be that of a screen divided with the road map in text or in graphics on the display means. It is also possible to display the information according to the direction of the driver's gaze and superimposed briefly on the road map until they are read by the driver. For example, the split screen or the superimposed information display may be cut again when the driver turns his eyes away from the display means of the navigation system. The invention also relates to a vehicle navigation system comprising a display means for displaying the information intended for the driver, a camera determining at least the direction of the driver's gaze, and a unit of control cooperating with the camera and the display means so that at least a portion of the information displayed by the display means is presented in accordance with the viewing direction. According to an advantageous development of the navigation system, the display means comprises a road map which forms at least a part of the information displayed by the display means, the nature of the display of the road map, in particular the zoom coefficient of the road map display being adjusted according to the direction of the gaze. For example, the zoom coefficient of the road map may be increased if the driver directs his eyes on the display means of the navigation system. The present invention also relates to a computer program with program code means for performing all the steps of the method as described above, especially when the computer program is applied by a computer or a navigation system. . The subject of the invention is also a computer program product with program code means recorded for example on a computer readable data medium for carrying out all the steps of the method as described above when the program of computer is applied by a computer or a navigation system. Drawings The present invention will be described hereinafter in more detail using a method of managing a navigation system and a navigation system implementing such a method, represented as 1 is a flowchart of an exemplary method for managing a navigation system according to the invention; FIG. 2 is a diagrammatic representation of the navigation system and the driver directing his gaze on the display means of the navigation system. DESCRIPTION OF AN EMBODIMENT OF THE INVENTION FIG. 1 schematically shows a management method of a navigation system applying the steps of the method of the invention. First, the process is started by activating (starting) the navigation system. Then, in a first step, it is checked whether the voice broadcast 21 is done or not. If the voice emission has not occurred (response N), the process returns to the start 20. If there has been voice transmission 21 (J), the time 22 of starting for example a time interval in which voice broadcast 21 has been started or terminated. Inside the time monitoring 22, the viewing direction 23 is determined by a camera which determines the direction of the driver's gaze. The step of determining the viewing direction 23 thus indicates whether the driver is looking at the display means (J) or is not looking at him (N). If the driver does not look at the display means (N) the process returns to the departure of the navigation system. If the means for determining the gaze direction 23 recognizes that the driver is directing his gaze on the display means (J), proceed to the method step 24 by which the course of the monitored time is recognized. At the end of the time (J), the process returns to the start of the navigation system. If, however, the time interval is not completed, the assistance function 25 is started and displays the information on the display means of the navigation system, for example the text repetition or the graphic repetition of voice broadcast 21 which has been transmitted acoustically to the driver. If the corresponding information is displayed on the display means of the navigation system, it may for example take a certain time and then after the display of the information on the display means of the navigation system, the This process returns to the start of the navigation system. FIG. 2 shows the navigation system 10 according to the invention with the display means 11 which presents the information 15.

Le moyen d'affichage 11 montre également une carte routière 17 et les informations affichées 15 sont indiquées sous la forme d'un écran divisé affichant aussi la carte routière 17. Le système de navigation 10 comporte une unité de commande 16 coopérant avec une caméra 13. La caméra 13 surveille la direction du regard 14 du conducteur 12. Si le conducteur 12 dirige ses yeux 14 sur le moyen d'affichage 11 du système de navigation 10, la caméra 13 saisit la direction de visée correspondante et transmet l'information relative à la direction de visée à l'unité de commande 16. Celle-ci traite l'information et la transmet au module de navigation 18 qui reproduit uniquement la partie du système de navigation 10 inté- grée au tableau de bord du véhicule. Le système de navigation 10 sert à exécuter le procédé notamment de façon que les informations 15, et par exemple aussi la carte routière 17 et notamment le coefficient de zoom de la carte rou- tière 17 soient ainsi affichés sur le moyen d'affichage 11 sur lequel le conducteur 12 dirige ses yeux 14. Le déroulement du procédé selon la figure 1 peut être fait par l'unité de commande 16 qui fait partie du système de navigation 10 et peut par exemple être intégrée directement dans le module de naviga- tion 18. Par définition, la caméra 13 fait également partie du système de navigation 10 ; elle peut néanmoins être installée séparément du module de navigation 18 dans la zone proche de la tête du conducteur 12 de sorte que la caméra 13 constitue un composant du véhicule intégrant le système de navigation 10. The display means 11 also shows a road map 17 and the displayed information 15 is indicated in the form of a split screen also displaying the road map 17. The navigation system 10 comprises a control unit 16 cooperating with a camera 13 The camera 13 monitors the direction of the gaze 14 of the driver 12. If the driver 12 directs his eyes 14 on the display means 11 of the navigation system 10, the camera 13 captures the corresponding direction of sight and transmits the relative information. to the direction of sight at the control unit 16. The latter processes the information and transmits it to the navigation module 18 which reproduces only the part of the navigation system 10 integrated in the dashboard of the vehicle. The navigation system 10 serves to carry out the method in particular so that the information 15, and for example also the road map 17 and in particular the zooming coefficient of the road map 17 are thus displayed on the display means 11 on The conduct of the method according to FIG. 1 can be done by the control unit 16 which is part of the navigation system 10 and can for example be integrated directly into the navigation module. By definition, the camera 13 is also part of the navigation system 10; it may nevertheless be installed separately from the navigation module 18 in the area near the driver's head 12 so that the camera 13 constitutes a component of the vehicle integrating the navigation system 10.

NOMENCLATURE 10 système de navigation 11 moyen d'affichage 12 conducteur 13 caméra 14 regard du conducteur 15 informations 16 unité de commande 17 carte routière 18 module de navigation 20-25 étape du procédé de gestion d'un système de navigation15 NOMENCLATURE 10 navigation system 11 means of display 12 driver 13 camera 14 view of the driver 15 information 16 control unit 17 road map 18 navigation module 20-25 step of the management process of a navigation system15

Claims (1)

REVENDICATIONS1°) Procédé de gestion d'un système de navigation (10) de véhicule comportant un moyen d'affichage (11) pour les informations (15) destinées au conducteur (12), une caméra (13) pour déterminer la direction de visée du regard (14) du conducteur (12) et au moins une partie des in- formations (15) affichées par le moyen d'affichage (11) est affichée en fonction de la direction de regard (14). 2°) Procédé selon la revendication 1, caractérisé en ce que les informations (15) du moyen d'affichage (11) du système de navigation (10) sont notamment des informations de navigation (15), et * les informations (15) sont affichées en fonction de la direction du regard (14) dirigé au moins brièvement sur le moyen d'affichage (11) du système de navigation. 3°) Procédé selon la revendication 1, caractérisé en ce que le système de navigation (10) émet des informations vocales (21), no- tamment des informations de navigation, * la détermination (23) de la direction du regard (14) du conducteur (12) se faisant en fonction de l'émission vocale (21) par système de navigation (10). 4°) Procédé selon la revendication 1, caractérisé par une surveillance de temps (22), * l'affichage des informations (15) par le moyen d'affichage (11) se faisant si la direction du regard (14) du conducteur (12) sur le moyen d'affichage (11) a été déterminée à l'intérieur d'un intervalle de temps fourni par la surveillance de temps (22) après l'émission de l'information vocale (21). 5°) Procédé selon la revendication 1, caractérisé en ce quel'information vocale (21) du système de navigation (10) est répétée avec les informations affichées (15) dans le moyen d'affichage (11) ou encore les informations présentées en texte ou en graphique pour l'affichage (10) correspondent au moins à l'information vocale (21) et/ou la complè- tent. 6°) Procédé selon la revendication 1, caractérisé en ce que le moyen d'affichage (11) représente une carte routière (17) qui est au moins une partie des informations (15) présentées par le moyen d'affi- chage (11), * la carte routière (17) est alors affichée sur le moyen d'affichage (11) si on détermine que le regard (14) du conducteur (12) est dirigé sur le moyen d'affichage (11). 7°) Système de navigation (10) de véhicule comportant un moyen d'affichage (11) pour afficher les informations (15) destinées au conducteur (12), * une caméra (13) déterminant au moins la direction du regard (14) du conducteur (12), et * une unité de commande (16) coopérant avec la caméra (13) et le moyen d'affichage (11) pour qu'au moins une partie des informations (15) affichées par le moyen d'affichage (11) soit présentée en fonction de la direction du regard (14). 8°) Système de navigation (10) selon la revendication 7, caractérisé en ce que le moyen d'affichage (11) présente une carte routière (17) qui est au moins une partie des informations (15) affichées par le moyen d'affi- chage (11), la nature de l'affichage de la carte routière (17), notamment le coefficient zoom de l'affichage de la carte routière (17) étant réglé en fonction de la direction du regard des yeux (14).9°) Programme d'ordinateur avec des moyens de code de programme pour exécuter toutes les étapes d'un procédé selon l'une quelconque des revendications 1 à 6, notamment lorsque le programme d'ordinateur est appliqué par un ordinateur ou un système de navigation (10) selon l'une quelconque des revendications 7 et 8. 10°) Produit-programme d'ordinateur comportant des moyens de code de programme pour exécuter les étapes d'un procédé selon l'une quelconque des revendications 1 à 6 lorsque le programme d'ordinateur est appliqué par un ordinateur ou un système de navigation correspondant (10) selon l'une des revendications 7 ou 8.15 CLAIMS 1 °) A method of managing a vehicle navigation system (10) comprising a display means (11) for the information (15) for the driver (12), a camera (13) for determining the aiming direction the view (14) of the conductor (12) and at least a portion of the information (15) displayed by the display means (11) is displayed as a function of the viewing direction (14). Method according to Claim 1, characterized in that the information (15) of the display means (11) of the navigation system (10) includes navigation information (15) and information (15). are displayed according to the direction of gaze (14) directed at least briefly on the display means (11) of the navigation system. Method according to Claim 1, characterized in that the navigation system (10) transmits voice information (21), in particular navigation information, the determination (23) of the direction of the gaze (14). of the driver (12) according to the voice emission (21) by navigation system (10). Method according to Claim 1, characterized by time monitoring (22), the display of the information (15) by the display means (11) occurring if the direction of the driver's gaze (14) ( 12) on the display means (11) has been determined within a time interval provided by the time monitoring (22) after the transmission of the voice information (21). Method according to Claim 1, characterized in that the voice information (21) of the navigation system (10) is repeated with the displayed information (15) in the display means (11) or the information presented in text or graphic for the display (10) corresponds at least to the voice information (21) and / or completes it. Method according to Claim 1, characterized in that the display means (11) represents a road map (17) which is at least a part of the information (15) presented by the display means (11). ), * the road map (17) is then displayed on the display means (11) if it is determined that the view (14) of the driver (12) is directed on the display means (11). 7 °) vehicle navigation system (10) comprising a display means (11) for displaying the information (15) intended for the driver (12), * a camera (13) determining at least the direction of the gaze (14) of the conductor (12), and * a control unit (16) cooperating with the camera (13) and the display means (11) so that at least a portion of the information (15) displayed by the display means (11) is presented according to the direction of gaze (14). 8 °) navigation system (10) according to claim 7, characterized in that the display means (11) has a road map (17) which is at least part of the information (15) displayed by the means of display (11), the nature of the display of the road map (17), in particular the zoom coefficient of the display of the road map (17) being adjusted according to the direction of the gaze of the eyes (14) .9) Computer program with program code means for performing all steps of a method according to any of claims 1 to 6, especially when the computer program is operated by a computer or system navigation system (10) according to any one of claims 7 and 8. 10 °) Computer program product comprising program code means for performing the steps of a method according to any one of claims 1 to 6 when the computer program is applied by a computer or a sys corresponding navigation system (10) according to one of claims 7 or 8.15
FR1259860A 2011-10-18 2012-10-16 METHOD FOR MANAGING A NAVIGATION SYSTEM AND NAVIGATION SYSTEM FOR ITS IMPLEMENTATION Active FR2981445B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE201110084664 DE102011084664A1 (en) 2011-10-18 2011-10-18 Method for operating navigation system utilized in vehicle, involves determining viewing directions of eyes of driver of vehicle, and displaying portion of navigation information on display unit based on determined viewing directions
DE102011084664.6 2011-10-18

Publications (2)

Publication Number Publication Date
FR2981445A1 true FR2981445A1 (en) 2013-04-19
FR2981445B1 FR2981445B1 (en) 2018-06-01

Family

ID=47990591

Family Applications (1)

Application Number Title Priority Date Filing Date
FR1259860A Active FR2981445B1 (en) 2011-10-18 2012-10-16 METHOD FOR MANAGING A NAVIGATION SYSTEM AND NAVIGATION SYSTEM FOR ITS IMPLEMENTATION

Country Status (4)

Country Link
CN (1) CN103063224B (en)
DE (1) DE102011084664A1 (en)
FR (1) FR2981445B1 (en)
IT (1) ITMI20121735A1 (en)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015185110A1 (en) 2014-06-03 2015-12-10 Metaio Gmbh Method and system for presenting a digital information related to a real object
CN105323539B (en) * 2014-07-17 2020-03-31 原相科技股份有限公司 Vehicle safety system and operation method thereof
FR3028221B1 (en) * 2014-11-12 2018-03-16 Psa Automobiles Sa. MAN INTERFACE / MACHINE AND METHOD FOR CONTROLLING FUNCTIONS OF A VEHICLE BY DETECTING MOTION AND / OR EXPRESSING THE CONDUCTOR
CN107850989A (en) * 2015-07-31 2018-03-27 大众汽车(中国)投资有限公司 For the methods, devices and systems of information to be presented in vehicle
WO2017168543A1 (en) * 2016-03-29 2017-10-05 三菱電機株式会社 Speech guidance device and speech guidance method
CN109141461A (en) * 2017-06-13 2019-01-04 博世汽车部件(苏州)有限公司 Automobile digital map navigation control system and method
DE102018216621B3 (en) 2018-09-27 2020-03-05 Bayerische Motoren Werke Aktiengesellschaft Method for providing interactive feedback for vehicle occupants, a control unit, a voice output device and a vehicle
EP3744568B1 (en) * 2019-05-29 2022-01-19 Ningbo Geely Automobile Research & Development Co. Ltd. A system and method for providing a desired view for a vehicle occupant
DE102020211859A1 (en) 2020-09-22 2022-03-24 Volkswagen Aktiengesellschaft Method and display system for displaying information to a driver
DE102022119858B4 (en) 2022-08-08 2024-02-29 Cariad Se Method for mobile language learning in a vehicle through context-dependent querying of vocabulary, a control circuit and a vehicle

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0667086A (en) 1992-08-24 1994-03-11 Canon Inc Optical device with glance detecting function
JPH11288341A (en) * 1998-04-01 1999-10-19 Canon Inc Device and method for navigation
DE102004005816B4 (en) 2004-02-06 2007-02-08 Audi Ag motor vehicle
JP2008225216A (en) * 2007-03-14 2008-09-25 Toyota Motor Corp Information display apparatus
CN101566478A (en) * 2008-04-25 2009-10-28 佛山市顺德区顺达电脑厂有限公司 Navigation system and navigation method
JP2010039686A (en) * 2008-08-04 2010-02-18 Toyota Motor Corp Voice output device
TW201017474A (en) * 2008-09-03 2010-05-01 Koninkl Philips Electronics Nv Method of performing a gaze-based interaction between a user and an interactive display system
CN102200445B (en) * 2010-03-23 2013-03-13 财团法人资讯工业策进会 Real-time augmented reality device and method thereof

Also Published As

Publication number Publication date
CN103063224A (en) 2013-04-24
ITMI20121735A1 (en) 2013-04-19
DE102011084664A1 (en) 2013-04-18
CN103063224B (en) 2019-04-12
FR2981445B1 (en) 2018-06-01

Similar Documents

Publication Publication Date Title
FR2981445A1 (en) METHOD FOR MANAGING A NAVIGATION SYSTEM AND NAVIGATION SYSTEM FOR ITS IMPLEMENTATION
FR2997046A1 (en) DRIVING ASSISTANCE SYSTEM AND METHOD FOR MANAGING IT
US9613459B2 (en) System and method for in-vehicle interaction
KR101751362B1 (en) Apparatus for storaging image of camera at night and method for storaging image thereof
FR2993844A1 (en) METHOD FOR ASSISTING THE DRIVER OF A VEHICLE
FR2864311A1 (en) Display system for vehicle e.g. automobile, has extraction unit extracting position on image of scene from red light element of recognized object, and windshield having display zone in which display image is superposed on scene
FR2995418A1 (en) METHOD AND DEVICE FOR CONTROLLING A COMPONENT OF A MOTOR VEHICLE USING GESTURES
US20160140760A1 (en) Adapting a display on a transparent electronic display
FR3073053A1 (en) OPTICAL SYSTEM WITH HEAD-HIGH DISPLAY AND INTEGRATED LIGHTING
FR2861488A1 (en) Drive assisting device for vehicle, has collision possibility determining unit to determine whether possibility of collision between certain and subject vehicles exists or not based on result of relative position determining unit
FR3052252A1 (en) OPTRONIC VISION EQUIPMENT FOR A TERRESTRIAL VEHICLE
WO2018007269A1 (en) Head-up display and method for controlling an image-generation device of a head-up display
KR20150018927A (en) Apparatus for storaging image of camera at night and method for storaging image thereof
JP2020138569A (en) Periphery monitoring device
JP2009134589A (en) Driving support device
FR3060485A1 (en) SYSTEM FOR DISPLAYING THE ENVIRONMENT OF A VEHICLE ACCORDING TO THE DIRECTION OF THE DRIVER'S LOOK
FR3026502A1 (en) SYSTEM AND METHOD FOR CONTROLLING EQUIPMENT OF A MOTOR VEHICLE
WO2017096821A1 (en) Driving safety detection method and apparatus
CN113492864A (en) Driving support device and data collection system
US20150130938A1 (en) Vehicle Operational Display
FR3055988A1 (en) DEVICE FOR ASSISTING A VEHICLE DRIVER FOR THE CONTROL OF TASKS BY TEMPORARILY EMBEDDED COMMUNICATION EQUIPMENT.
FR3061793A1 (en) METHOD AND DEVICE FOR MONITORING A STATIONED MOTOR VEHICLE
WO2014096576A1 (en) Interface module making it possible to detect a gesture
FR2962235A1 (en) System for displaying information in vision field i.e. public internet site, to user, has determination unit determining information based on acquired sound sequence, and superimposition unit superimposing representation of information
JP7270206B2 (en) Information presentation system, information presentation method, program, and mobile object

Legal Events

Date Code Title Description
PLFP Fee payment

Year of fee payment: 4

PLFP Fee payment

Year of fee payment: 5

PLSC Publication of the preliminary search report

Effective date: 20170929

PLFP Fee payment

Year of fee payment: 6

PLFP Fee payment

Year of fee payment: 7

PLFP Fee payment

Year of fee payment: 8

PLFP Fee payment

Year of fee payment: 9

PLFP Fee payment

Year of fee payment: 10

PLFP Fee payment

Year of fee payment: 11

PLFP Fee payment

Year of fee payment: 12